违章建筑不可以随意拆除，但一般不用赔偿。拆除违章建筑应行政机关调查取证，确认建筑物违章，对违章搭建人作出责令停止违法行为通知书，责令其停止违法建设行为。搭建人拒不拆除违章建筑的，行政机关在作出行政处罚决定前，依法向其发出行政处罚告知书，告知拟处罚结果和被处罚人陈述、申辩等权利，而后进行拆除。

拆除违章建筑程序是什么

（一）立案就是执法部门对于发现或接到投诉、举报等事实或者材料后，认为有违法事实发生或存在并需要追究法律责任时，决定把它作为行政案件进行查处的一种活动。

（二）调查程序

（三）决定程序

1、告知，听取陈述、申辩

这个主要是保证被处罚人的知情权、陈述权、申辩权。执法人员在作出处罚决定前，一般会书面告知被处罚人行政处罚的事实、理由和依据。被处罚人有权陈述、申辩，如果执法人员拒绝听取当事人的陈述、申辩，行政处罚决定不能成立。

2、听证

听证是指行政机关实施行政处罚过程中，在作出决定前，由非本案调查人员主持，听取调查人员提出当事人违法的事实、证据和行政处罚建议与法律依据，并听取当事人的陈述、举证、质证和申辩及意见的程序活动。《行政处罚法》的规定，行政机关作出责令停产停业、吊销许可证或者执照、较大数额罚款等行政处罚决定之前，应当告知当事人有要求举行听证的权利；当事人要求听证的，行政机关应当组织听证。当事人不承担行政机关组织听证的费用。

对于听证程序，建议被处罚人还是要重视一下不要错过这个程序。错过这个程序，虽然可以在这之后的比如行政复议、行政诉讼程序中得到救济。但我建议你还是不要错过听证。

（四）处罚决定书的送达和执行

执法机关如果决定要进行处罚，会作出并向被处罚人送达《行政处罚决定书》。

《行政强制法》第四十四条

对违法的建筑物、构筑物、设施等需要强制拆除的，应当由行政机关予以公告，限期当事人自行拆除。当事人在法定期限内不申请行政复议或者提起行政诉讼，又不拆除的，行政机关可以依法强制拆除。

《城乡规划法》第六十四条

未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。