是否合理,借款人说了他不是放高利贷,他给我签的是买房协议,我应该怎么办？

各位律师：
我用自己的住房在2008年5月15日担保为朋友借款5万元，一个月内还6万，当时借款人出的是买房协议，上面写的是“我现有住房一套，100米，以20万元出套，借款人已付6万元现金，6月15日交齐房款，如有一方不按协议执行，付双倍费用”，由于当时朋友急用钱，我和爱人都在这份协议上签了字，我的这个朋友至今没有还清钱，借款由5万元一直涨到12万元，现在我到处都找不到这个朋友，他的家里人说他不回家，借款人现在要收我家的房子，是否合理？借款人说了他不是放高利贷，他给我签的是买房协议，我应该怎么办？

高利贷不受保护！要是按买房协议算的话，可以撤销因为显失公平！！！所以你的权利不会被侵害