你有权要求你哥腾房,因为你们当初有口头协议,这在法律上受保护的,但是关键要你父亲作证人。你应该和家里的长辈沟通,让长辈出门帮你协调,不然只有走法律途径,这样你们兄弟关系就到此结束。
家庭的事情,还是内部解决好,毕竟是一家子,希望哥哥能做个表率,做老大的不吃亏怎么当大哥啊!祝早日解决