Olá
Comigo ocorreu e imagino que possa ocorrer com mais alguém, entou vou deixar aqui a resolução se ainda ninguém deixou. Para as pessoas que tiveram o seguinte erro:
"ssh: connect to host 192.168.1.9 port 22: Connection refused"
Provavelmente a solução será dar um (na VM do virtual box):
sudo apt update (para atualizar os pacotes)
sudo apt install openssh-server
Espero ter ajudado.