$(document).ready(function () {
  var maxclicked = 4; // на четвертом клике ссылка исчезает
  $('#menu li').append('<span></span>').data('clicked',0); //добавляем счетчик в текстовом виде и в виде переменной
  
  $('#menu li').click(function () {
    $(this).data('clicked', $(this).data('clicked') + 1);
    if ($(this).data('clicked') == maxclicked) {
      $(this).remove();
      return;
    }
    
    $(this).children('span:last').html('[' + $(this).data('clicked') + ']');
    
    $(this).removeClass('left');
    $(this).parent().children().not(this).addClass('left');
  });
});
left будет классом для сдвига элементов списка влево
left { margin-left: 5em }