2013年城市规划实务题只记得这个违法建设的题，不要画图，比较简单，大概题意就是这样，详细的请大家纠正！

某建设单位为了建设一栋厂房，于2013年2月到规划局办理《建设用地规划许可证》，到7月份的时候，厂房顺利竣工，建设单位向规划局申请竣工验收，规划局却向建设单位发出了《行政处罚决定书》，9月该建设以规划局的《行政处罚决定书》违反有关法律法规为由起诉规划局，要求规划局撤销或变更处罚决定书。

请从有关单位的职责过错、处罚程序方面来谈谈对这个案例的看法？该处罚决定书是否应该撤销或变更，为什么？