Analisando o programa, foi informado que i <= letras.length , dessa foram ele vai apresentar 5 elementos e não 4, para isso o correto é i < letras.length
var letras = ['A', 'B', 'C', 'D'];
for( var i = 0; i < letras.length; i ++) {
alert(letras[i]);
}