[ksa]

пытался сначала сделать через animate, но он не подходит тк анимация срабатывает на скролл и не останавливается пока не отработает полностью

Отнюдь!
Это ты ее не останавливаешь...
https://jquery-docs.ru/stop/