Olá! Entendo que você está tendo dificuldades para fazer o upload dos arquivos no Jupyter Notebook.
Para começar você precisa abrir esse arquivo do jupyter notebook no windows. Você pode isso fazer abrindo o terminal e indo até a pasta onde está o arquivo. Nessa pasta você pode digitar jupter notebook arquivo.ipynb. Exemplo:
Para ler qualquer arquivo csv no notebook basta usar a pandas normalmente passando o endereço completo do arquivo.
Se estiver com alguma dificuldade na instalação do jupyter notebook sugiro que instale o python através da distribuição anaconda:
https://www.anaconda.com/download