Quando utilizamos a biblioteca de styled components, precisamos utilizar a função styled para criar um componente estilizado a partir de um componente padrão (no caso, o button). A sintaxe correta para isso é:
const NomeDoComponenteEstilizado = styled(ComponentePadrao)...
;
Pois utiliza a sintaxe correta para criar um componente estilizado a partir de um botão e definir os estilos a serem aplicados a ele.