房屋行政管理部门因为合肥市蜀山区违章建筑属于房屋违法行为，行政管理部门负责监管和处理此类违法行为。

此外，如果遇到严重的违章建筑，可向建设部门或公安部门举报，他们也会参与处理。