MANIPULAÇÃO DE BASE DE DADOS

Oii, tudo bem?

Peço desculpas pela demora em obter o retorno.

Pode-se corrigir essa desordem das informações com a linguagem Python. É importante tratarmos dessa base de dados antes de importar para o SQL ou SAS, uma vez que essas linguagens não são apropriadas para lidar com correções em arquivos não estruturados.

Abaixo segue um código de exemplo:

# Abre o arquivo original para leitura 
with open('base.txt', 'r') as arquivo:
 linhas = arquivo.readlines() 

# Lista para armazenar as linhas corrigidas
linhas_corrigidas = [] 

# Loop para percorrer as linhas do arquivo 
i = 0
 while i < len(linhas): 
linha_atual = linhas[i].strip() 
if linha_atual.count(',') < 5: # Verifica se a linha não possui todos os campos
proxima_linha = linhas[i + 1].strip()
 linha_corrigida = linha_atual + proxima_linha 
linhas_corrigidas.append(linha_corrigida)
 i += 2 
else: 
linhas_corrigidas.append(linha_atual) 
i += 1 

# Abre um novo arquivo para escrita e insere as linhas corrigidas
 with open('base_corrigida.txt', 'w') as arquivo_corrigido: arquivo_corrigido.write('\n'.join(linhas_corrigidas))

Caso queira aprofundar mais na linguagem indico a seguinte formação da Alura:

• Python para Data Science

Também é preciso ressaltar que como é um projeto externo ao do curso não temos acesso ao cenário no qual esses dados estão envolvidos, então outros testes deverão ser feitos. Porém, espero ter te ajudado a dar um salto inicial para a resolução.

Bons estudos!