[e1f]

Вешайте при сворачивании/разворачивании класс -- типа expanded/collapsed, по наличию и определяйте:

$('.withChildren span').click(function(e){
        e.preventDefault();
        var ul = $(this).parent().find('ul');
        ul.toggleClass('expanded').toggleClass('collapsed').toggle('slow');
});