Pesquisei em alguns outros fóruns até conseguir entender o calculo da fatorial. Meu código ficou dessa forma.
public class TestaFatorial {
public static void main(String[] args) {
int fat = 1;
int numero = 10;
for(int i = 1; i <= numero; i++){
fat *= i;
System.out.println("Fatorial de " + i + " é " + fat);
}
}
}