拆违建是维护城市环境秩序、保护城市安全的要紧举措。对于不给拆违建的行为，可以采取以下手段进行处罚：

1.罚款：可以对不给拆违建的责任人或单位处以肯定的罚款，罚款数额依据违建的紧急程度和对城市环境导致的影响进行衡量。

2.责令自行拆除：可以需要不给拆违建的责任人或单位自行拆除违建物，并规定适当的期限。在规定的期限内如仍不拆除，可采取行政强制手段，由有关部门拆除，成本由责任人或单位承担。

3.限制行政行为：可以对不给拆违建的责任人或单位限制办理有关的行政行为，譬如不发放有关的许可证件、不给予资金支持、不提供政府服务等，以此来限制其在其他范围的进步。

4.行政拘留：对于情节紧急、拒不服从拆违建决定的行为，可以依法对不给拆违建的责任人采取行政拘留手段，加大对其的监管和惩处。

5.追究刑事责任：在一些紧急状况下，假如不给拆违建的行为涉嫌犯罪，譬如故意破坏国家财产、扰乱公共秩序等，可以追究刑事责任，依法进行刑事处罚。

总之，对于不给拆违建的行为，应该依法严肃处置，通过罚款、责令自行拆除、限制行政行为、行政拘留等方法，加强对违法者的惩处力度，维护城市环境秩序和法制安全。同时也应进一步加大对违建现象的宣传教育，增强公众的违建意识和法制观念，一同努力打造好的城市环境。