Substituir varios characteres de um strings dentro de um dataframe

Olá, Marcelo! Tudo bom contigo? Espero que sim!

A forma como você utilizou para substituir muitos caracteres (compare['description_polarion'] = compare[ 'description_polarion'].str.replace('&lt;', '<').replace('&gt;', '>')) só vai considerar o primeiro replace mesmo. Uma forma mais elegante de você fazer isso é utilizar um laço for para a substituição de múltiplos caracteres. Primeiro, você pode criar um dicionário no qual as chaves são as palavras a serem substituídas e os elementos as palavras que irão substituir, podendo ser do seguinte modo com base no seu código:

dic = {'&lt;': '<','&gt;': '>','_x000D_': '','* ': '','&#39;': "'",'. ': '.'}

Depois disso, crie um laço for que as variáveis vão ler as chaves e os elementos através do método .items() do dicionário. E dentro do for, você pode fazer a substituição com o método replace, do seguinte modo:

for i, j in dic.items():
    compare['description_polarion'] = compare['description_polarion'].str.replace(i, j)

Eu espero ter te ajudado! Se o problema persistir ou surgir outra dúvida estarei à disposição.

Bons estudos!

Obrigado, agora ficou mais elegante, e se eu identificar um novo caracter para substituir, só preciso atualizar o dicionário. Unico comentário é que para alguns caracteres preciso da opção regex=False, então só modifiquei o código para ter essa opção sempre False, já que para str.replace o default é True. Mais uma vez, obrigado.

for i, j in dic.items():
    compare['description_polarion'] = compare['description_polarion'].str.replace(i, j, regex=False)

Por nada!

Bem lembrado esse ponto, haha ^^

Parabéns pela solução e bons estudos!