可以不让盖房子吗

一个院子里住俩家,我家在外面房厂是买的,里面是爸家,现有另一个弟弟要来爸院里盖房子,要走我家窗前,我们不同意,问有什么法律条款吧,我家该怎么办,爸同意另一个弟弟在院里盖。