Lembrando que deve-se fazer todas as instalações dentro do ambiente virtual que criamos.
Essas que vou citar agora, foi as que eu vi alguns colegas usando e funcionando(usar o comando no prompt do anaconda):
conda install -c anaconda xlrd
Essa abaixo pode ser dentro do próprio Jupyter notebook:
!pip install openpyxl
df_xlsx = pd.read_excel('dados/aluguel.xlsx', engine='openpyxl')
Se continuar atualize o python dentro do ambiente virtual do anaconda com o comando:
conda update python
Rode o código novamente após a atualização:
df_xlsx = pd.read_excel('dados/aluguel.xlsx')
df_xlsx