А если скриптов на странице несколько и нужно удалить все?
Так неполучается:
var s = document.body.getElementsByTagName("script");
for(var i=0; i<s.length; i++)
{
var script = document.getElementsByTagName("script")[i];
script.parentNode.removeChild(script);
alert(s.length);
}