就没有同意,他就不断地在我家门上贴纸条,索要钱,而且语言中有侮辱性的语言,请问律师,我该怎么办？

六年前，我家装修，没有地方住，因此借住在旁边的邻居家，那时候我们两家关系很好。我住了二十多天，为了表示感谢，我给他二百元钱，他没有要，后来过节的时候，我买了近二百元的礼品送给他，他收下来。去年因为一些小事，两家闹得不愉快，他就旧帐重提，向我索要当初借住的费用，让我给他五百元钱！我认为我当初是借住，没有说是租用，而且当初我要给他钱，他没有要，就是放弃了。就没有同意。他就不断地在我家门上贴纸条，索要钱，而且语言中有侮辱性的语言。请问律师，我该怎么办？

可以起诉要求停止侵害，赔礼道歉