Duas formas bem parecidas com a do professor p/ conversão seria usar a função col ao invés do dataframe fazendo cast do campo de duas formas:
empresas = empresas.withColumn('capital_social_da_empresa',f.col('capital_social_da_empresa').cast("double"))
empresas = empresas.withColumn('capital_social_da_empresa',f.col('capital_social_da_empresa').cast(DoubleType()))
Abs
Oii Pedro, tudo bem contigo?
Que bacana! Valeu demais por trazer isso aqui no fórum.
Realmente existem outras formas de converter o tipo da coluna capital_social_da_empresa de string para double, e esses dois trechos de códigos que você apresentou realizam perfeitamente essa conversão.
Parabéns por ter ido além e procurado outras formas de realizar esse processo de conversão. Pesquisar por conteúdos além dos ensinados no curso acrescenta muito no seu aprendizado :)
Qualquer dúvida estou à disposição.