Caso ajude outros alunos, eu resolvi esse problema instalando no Prompt de comando do anaconda os seguinte pacotes:
Para o xlsx, conda install -c anaconda xlrd
Para o html: conda install -c anaconda lxml conda install -c anaconda html5lib conda install -c anaconda beautifulsoup4