Olá Marcel, vamos por partes.

Em relação ao IDE, eu uso o VS Code, já utilizei o Atom, mas sem dúvida (para mim) o VS Code é bem melhor. As extensões disponíveis, o fato de ser open source etc. Não tive experiência com outras ferramentas, portanto eu não saberia dizer.

Em relação ao ambiente de desenvolvimento. Sem dúvida é uma boa prática separar os ambientes. No caso de Data Science, uma ferramenta muito indicada, inclusive eu uso, é o Jupiter Notebook, pois torna a visualização de dados bem satisfatória.

Como ambiente de desenvolvimento, eu uso o Docker, pois além de separar o ambiente de desenvolvimento, o Jupiter Notebook inicia com a inicialização da máquina, para isso uso o seguinte Dockerfile e docker-compose:

requirements.txt

jupyterlab==3.0.16

Dockerfile:

FROM ubuntu:18.04

WORKDIR /notebook

RUN apt-get update -y
RUN apt-get install -y python3-dev python3-pip build-essential

RUN pip3 install --upgrade pip
COPY ./requirements.txt requirements.txt

RUN pip install -r requirements.txt

docker-compose

version: '3'

services:
  jupyter:
    image: 'jupyter/datascience-notebook:latest'
    ports: 
      - '8888:8888'
    volumes:
      - ./data:/home/jovyan/work
    container_name: jupyter
    environment:
      JUPYTER_ENABLE_LAB: 'yes'

Ahh, detalhe, eu "instalei" uma janela do chrome com o Jupiter Notebook, assim o tenho a um click quando eu preciso. Mais um detalhe, na verdade eu uso o Jupiter Lab, uma opção um pouco mais avançada que o Notebook.

Obrigado pela resposta Anderson :)

Eu sou bem iniciante então não entendi tudo o que vc disse hahahaha.

Por que usar o Vscode e o Jupyter Notebook? (Não daria para usar apenas o VsCode?)

O que é um ambiente de desenvolvimento?

Hoje eu consegui criar meu primeiro arquivo dentro de um ambiente virtual, que está num container Docker, este criado com uma imagem Anaconda (baixado pelo hub docker) rodando no VsCode. Fiz certo?

Além disso me surgiu outra dúvida, como uso uma imagem Anaconda e não o Anaconda para Windows, eu acabo não tendo aquele painel onde posso criar ambientes virtuais, rodar Jupyter etc... Me lembro que se eu precisasse instalar uma nova biblioteca eu usava aquele menu dos ambientes virtuais, agora como se faz isso neste caso (imagem Anaconda num container)? Tem como eu checar quais bibliotecas eu tenho instalado no meu arquivo?

Ah e vi que vc falo de rodar o Jupyter no docker, tem como usar pela imagem Anaconda? Se tiver, qual a diferença?

Desde já agradeço pela atenção.

Olá Marcel,

Vamos tentar melhorar a resposta.

Sim, é possível usar somente o VS Code, entretanto, ao se trabalhar com dados, o Jupyter é interessante tanto para manipular as rotinas (execução dos códigos), como para visualizar os dados.

Ambiente de desenvolvimento vs ambiente de produção. O primeiro é o ambiente de desenvolvimento do código fonte, enquanto que o ambiente de produção é o ambiente na qual o usuário final tem acesso, um web app por exemplo.

Parabéns, você usando o Docker container. Sim, o VS Code tem algumas extensões que facilitam o desenvolvimento com Docker.

Eu faço o seguinte para usar o Jupyter em um container.

Deixo a porta 8888 exposta e crio um volume, neste volume fica os scripts que funcionam no container.

Quanto a diferença, eu particularmente prefiro a imagem somente o Jupyter Lab porque é mais "enxuto", imagino que a imagem do Anaconda tenha muita mais pacotes instalados.

À disposição.