公公生前与丈夫有交换房子的协议做过公证，但是现在继母反对，这样能提起诉讼吗？

你好，我想请问下，我老公的爷爷留了套房子给我的老公。家里的亲戚都放弃这套房子的继承权。也去公证处做了公证了。但是，我公公先前有说过他住的旧房子跟我老公的新房子换。这个公证也做了。现在房子盖好了，我们想搬进去旧房子里住。可是我老公的后妈不愿意把房子给我们了。然而只把新房子的原拆原迁的60平方给我们。我想问下如果有公证过，我们一家人是不是可以搬进那套旧房子里去，这样的情况能不能提起诉讼？