Movi a variável totalGastoComEventospra fora do while e acho que é isso. Acrescentei na variável gasto o contador para que esteja identificado com um número cada evento quanto aparecer o prompt.

<meta charset="UTF-8">
<script>

    function pulaLinha() {

        document.write("<br>");
    }

    function mostra(frase) {

        document.write(frase);
        pulaLinha();
    }

    var totalDeEventos = parseInt(prompt("Informe o total de eventos"));

    var contador = 1;
    var totalGastoComEventos = 0;
    while(contador <= totalDeEventos) {


        var gasto = parseFloat(prompt("Informe total gasto com evento número "+ contador));
        totalGastoComEventos = totalGastoComEventos + gasto;
        contador++;
    }

    var media = totalGastoComEventos / totalDeEventos;

    mostra("A média de gastos é " + media);
</script>