硬要霸占房屋，你可以这么做。
首先，得把相关的证据给收集起来，像房屋的产权证明，还有那些能证明你在占有使用这房屋的凭证等等，这样就能有力地证明你对这房屋拥有合法的权益。
接着，你可以和好好地商量商量，让他把房屋还给你，并且别再做出侵权的行为，同时，要把协商过程中的相关证据给保留好。
要是商量来商量去都没个结果，那你就可以向当地的基层人民调解组织去申请调解，让调解组织帮忙促使你们双方达成和解。
要是调解也没起作用，那你就可以去房屋所在地的人民法院提起民事诉讼，要求把房屋还给你，还要让他承担侵权的责任，比如说赔偿你的损失之类的。
在整个诉讼的过程当中，你一定要把自己的诉讼请求给明确清楚，得提供足够充分的证据，并且要严格按照法律的程序和规定来办事。