對于已作出的行政處罰決定，應當該由處罰機關的上級行政機關或者有關機關責令其撤銷，予以改正；也可以由當事人通過依法申請行政復議，或者依法向法院起訴等方式來撤銷。法律依據：《中華人民共和國行政處罰法》第七十六條 行政機關實施行政處罰，有下列情形之一，由上級行政機關或者有關機關責令改正，對直接負責的主管人員和其他直接責任人員依法給予處分： （一）沒有法定的行政處罰依據的； （二）擅自改變行政處罰種類、幅度的； （三）違反法定的行政處罰程序的； （四）違反本法第二十條關于委托處罰的規定的； （五）執法人員未取得執法證件的。 《中華人民共和國行政訴訟法》第七十條 行政行為有下列情形之一的，人民法院判決撤銷或者部分撤銷，并可以判決被告重新作出行政行為： （一）主要證據不足的； （二）適用法律、法規錯誤的； （三）違反法定程序的； （四）超越職權的； （五）濫用職權的； （六）明顯不當的。