Pensando em ajudar meus colegas caso enfrente o mesmo problema, visto que as soluções propostas no forum não resolveu comigo, segue a solução que encontrei.
Sobre o problema em si, verifiquei que um complicador seria a extensão do arquivo: "xlsx". Esse erro ocorre quando a biblioteca xlrd, que é usada para ler arquivos Excel (.xls e .xlsx), não consegue ler o arquivo porque ele está em um formato não suportado.
Pois bem, de forma rápida para seguir no aprendizado, eu criei um novo arquivo no formato "xls" (extensão de Excel de 97 a 2004), modificando o código só quanto o arquivo (ex: df_xlsx = pd.read_excel('dados/aluguel.xls')) - erro resolvido.