Minha duvida é simples:
Quando importamos "import pyspark.Pandas" esse pandas roda em qual motor? Ele roda no motor do spark ou a biblioteca chama o motor do pandas internamente? Isso afeta MUITO a performance com grandes volumes de dados e para mim não ficou claro na aula.