Quando ele fala que o svg perde consideravelmente as informações de imagem, logo me lembrei que o Adobe Illustrator temos dentro das opções de trancado uma que se chama "alta fidelidade". Esta função mantém a maior parte das informações de cor da imagem (dependendo do tamanho da foto pode ser bem pesado para o pc calcular, então cuidado).
No teste que fiz, usei uma imagem aleatória do google que estava em .jpeg com pouco mais de 900 kb Salvando o arquivo no "Salvar como", em svg, o tamanho da foto que estava usando de exemplo ficou ainda maior, com mais de 4 mb! Tentando alterar a configuração do svg para uma versão "tiny" o tamanho do arquivo aumentou ainda mais. Então, selecionando todas as partes da imagem e com o botão direito apertei em "exportar". O arquivo veio com a imagem em maior escala e o tamanho pouco maior que 2 mb. Infelizmente não entendo tanto para alterar mais configurações e conseguir um resultado melhor, mas creio que já é um bom resultado pensando em ter svgs no lugar de jpgs.
Se alguém conseguir ajudar quanto ao export no Illustrator, ficaria agradecido!