Oi André! Como vai?
Os testes feitos em aula são, sim, contabilizados, afinal já estamos utilizando a API. Porém, os créditos disponibilizados para teste devem bastar. E, caso você preferir assistir às aulas e anotar seus insights, para ter uma economia e investir em seu projeto, fique a vontade :)
O valor depende da quantidade de tokens utilizados em um projeto e também do modelo que está sendo utilizado. Na página pricing da OpenAI você pode conferir esses valores.
O preço é referente a mil tokens, que são pedacinhos de palavras contabilizados tanto no prompt quanto na saída. A própria OpenAI estima que mil tokens correspondam a mais ou menos 750 palavras.
Bons estudos! Abração.