他以伤的事情阻碍我们建房违法吗,如果解决不了,我们的房就不能建了吗？

我的房地基是在06年12月31日拿准建卡的，可至今房子也没有盖上。地基后排的村民无理取闹，说是他的房地基，并拿着棒子就要打人，结果没打找我父亲，自己却跌倒了，左手腕骨受伤，经村委会调节签订协议书，给他500元钱，不能再捣乱我们建房。等他的伤好后，在进行调节，责任分清。钱给了他，等我们再去建房时，他不让我们建房，并唆使他有些智障的老婆出来拿刀砍人，这种事情发生了两次，我们当时就报了警，并有笔录。派出所说，法医鉴定不是我们打的伤，说我们有一定的间接责任，让我们给他出医疗费，我们并没答应，请问律师，我们该采取什么手段保护我们的权益呢？他以伤的事情阻碍我们建房违法吗？如果解决不了，我们的房就不能建了吗？

行为人对自己的行为负责，没有行为当然不承担责任。可以起诉到法院要求排除妨碍，继续建房。