Bom dia! Procurei bastante a solução deste problema e resolvi com os seguintes passos:
- Primeiramente instalar as Ferramentas de Compilação do Visual Studio 2017 Link: https://visualstudio.microsoft.com/pt-br/downloads/?rr=https%3A%2F%2Fgithub.com%2Fbenfred%2Fimplicit%2Fissues%2F76
Mesmo instalando as ferramentas, continuamos recebendo um erro de whl. Para resolver esse problema, baixei o arquivo whl pré-compilado no link a baixo: Link: https://www.lfd.uci.edu/~gohlke/pythonlibs/#mysqlclient
Após realizar o download, basta executar o comando a baixo dentro do ambiente que você está utilizando: Comando: pip install <path to .whl>
Depois disso basta executarmos o comando a baixo Comando: pip3 install flask_mysqldb==0.2.0
Com isso resolvi o problema e estou utilizando o flask_mysqldb no windows normalmente.