Não estou certo se é apenas para fins didáticos mas a connectionString poderia ser configurada nas variáveis de ambiente do próprio Azure Web App. Acredito que inclusive, para connection strings essa seja a forma mais recomendada, certo? Talvez pudesse fazer outros usos do Azure App Configuration como customizar algum parâmetro. Inclusive gostaria de ver nos próximos módulos em que situações seria ideal o uso de um Azure KeyVault.