Solucionado
Na verdade eu queria aquela funcionalidade do react router que deixa alguns components fixo independente da pagina que acesso. Ex: Acesso home e tem a estrutura padrão (Head,Main,Footer) ao acessar outra pagina, apenas o Main altera, os outros 2 ficam "fixos".
Fala, Cleverton! Tudo beleza?
Acho que entendi o que você quis dizer, e tenho uma boa notícia: O Next.js tem um componente pra isso.
Basicamente, podemos usar o componente do próprio Next.js para reutilizar um componente nosso em outra página da aplicação, por exemplo. Vou deixar aqui o link da documentação do Next.js com exemplos que você pode testar e aprimorar.
Bons estudos!