Se você quer aprender como funciona de fato as redes neurais olhe link abaixo: http://neuralnetworksanddeeplearning.com/
Ele explica e constrói uma rede neural do zero, sem usar nenhuma api pronta do python. Assim é possível aprender e fixar todos conceitos relativos a redes neurais, deep learning e machine learning.
Vale a leitura e o estudo no mínimo do capítulo 1.