楼下将房子改成麻将馆，可以举报他聚众赌博吗

不以盈利为目的，少量钱款的娱乐不是违法。如果麻将馆老板有聚众赌博行为那才是犯罪。
《关于办理赌博违法案件适用法律若干问题的通知》。其中规定：不以营利为目的，亲属之间进行带有财物输赢的打麻将、玩扑克等娱乐活动，不予处罚;亲属之外的其他人之间进行带有少量财物输赢的打麻将、玩扑克等娱乐活动，不予处罚。

开设棋牌社必须要经过政府的行政许可，你可以举报，

嗯可以的，如果他们改成赌博馆可以构成开设赌场罪，你可以向公安厅报案。