Fiz também o curso de Webpack, onde foi resolvido o problema de FOUC .
A configuração do arquivo webpack.config.js , como está neste curso de Vue tem este problema de FOUC , certo?
Até onde consegui entender, ficou inline no css deste curso.
Aqui está onde o problema é resolvido no curso de webpack: https://cursos.alura.com.br/course/webpack/task/29548
E aproveito pra perguntar se existe outra forma de resolver, embora esta solução que o próprio Flávio forneceu pareça boa.