Dúvidas

Basta você criar o arquivo .jar do Projeto B e importar este .jar no Projeto A que "todas" as classes ficarão disponíveis para acesso.

Mais isso não é muito uma boa prática. O melhor é fazer tudo organizado e separado!

Marcos, além de criar um arquivo .jar e incluir como dependência no seu projeto, você pode incluir esse projeto sem necessidade de gerar o .jar. No seu projeto clique com o botão direito o vá em Properties > opção Java Build Path > na guia Projects clique em Add e selecione qual projeto deseja ter acesso as classes.

Esse processo funciona como se você fosse incluir um nova lib mas sem a necessidade de gerar um .jar toda vez que houver alguma alteração a no projeto que será vinculado.