拆除违章建筑的部门主要包括以下几类：
国土资源部门
县级以上的国土资源部门，即国土资源管理局，有权代表国家行使土地管理权，对违法占地建设行为享有查处权。根据《土地管理法》第七十四条、第七十六条和第七十七条的规定，国土局可依法作出处罚决定，责令限期改正、治理、停止施工或责令限期拆除在非法占用的土地上新建的建筑物和其他设施。但国土局没有强拆权，不能自行强制拆除违法建筑和设施。当建设单位或者个人在诉讼期满不起诉又不自行拆除的，应依据《土地管理法》第八十三条之规定，申请人民法院强制执行。
城乡规划部门
县级以上地方人民政府城乡规划主管部门，即城乡规划局，有权对城市规划区内违反规划建设行为和非法临时建设（建筑）进行查处。根据《城乡规划法》第六十四条和第六十六条的规定，对未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设以及非法临时建设（建筑），可以结合具体情形作出责令停止建设、限期改正、罚款、限期拆除及没收实物或者违法收入等行政处罚。但当事人不按照处罚决定要求停止建设或拆除的，城乡规划局不能径行拆除，需要按照《城乡规划法》第六十八条的规定，向建设工程所在地县级以上地方人民政府提出申请，由县政府责成有关部门采取查封施工现场、强制拆除等措施。
乡镇人民政府
乡、镇人民政府是乡、村庄规划区内违反规划建设的行为查处主体。根据相关法律规定，乡、镇人民政府对乡、村庄规划区内违反规划建设的行为有查处权。
建设行政主管部门
工程所在地县级以上人民政府建设行政主管部门，即住房和城乡建设局（委），对未依法办理施工许可手续进行建设的违法行为，有权按照法律作出责令改正、停止施工及罚款等处罚决定。
综合行政执法部门
某些地区设有综合行政执法局，负责依法拆除违章搭建。例如，县综合行政执法局在接到举报后，有权对违法建设行为进行调查处置，并采取强制拆除等措施。
综上所述，拆除违章建筑的责任主体可能涉及多个部门，具体职责划分需根据违章建筑的性质、位置及当地政策进行确定。建议您在遇到违章建筑问题时，咨询当地相关部门以获取准确信息和处理指导。
相关文章：
9部门发文促进家政服务消费扩容升级04-18
解放社区联合多部门开展环境清理整治04-15
赤峰市人民政府发布废止通知！04-14
中华人民共和国森林法04-07