тупанул. если нажатая клавиша - нечисло, то мы отменяем действие по-умолчанию. isNaN, всё верно :)

Вполне себе логично в данном примере как раз использовать isNaN.

if(isNaN(String.fromCharCode(e.keyCode)) {
//отменили событие если не число
e.preventDefault();
return false;
}
//работаем дальше