Ну конкретно, что значит пройти и вздохнуть не дает? За руки хватает, рот зажимает и в подворотню тащит? Кричи "насилуют", по лицу дай.
Если все же помягче, то просто, коротко и монотонно "отстань" и отвернуться, на все его речи и действия. Когда-нибудь ему это надоест. Главное не смущаться, не бояться, не шугаться его, а просто заниматься своими делами, не замечая его, не глядя на него и не реагируя ни на что.