行政行为程序错误是指行政主体在作出行政行为时，未按照法律规定的步骤、顺序或形式进行，从而构成违法。具体来说，程序错误可能包括以下几种情形：
步骤欠缺：
行政主体未依照行政法规规定的步骤进行行政行为，遗漏或疏忽了法律预先设立的程序环节。
顺序颠倒：
行政主体违反法律规定的先后顺序作出行政行为，如先进行后面的程序，再进行前面的程序。
形式违法：
行政法律行为的作出应当采取某种法定形式而未采取，或采取了法律禁止的形式。
法定步骤缺省：
行政行为并未遵循或者未全部遵循法定程序环节，缺少或省略了一定的程序环节。
法定步骤颠倒：
虽然行政行为经过了所有的法定程序环节，但程序上的顺序被颠倒。
增设程序义务：
行政机关为当事人增加法定程序以外的义务。
在行政诉讼案件中，法院若认定行政行为存在程序瑕疵，会根据具体情况决定是撤销该决定还是保留。例如，如果撤消行政行为将对国家及公众利益带来严重损失，或者行政行为虽有轻微程序违规，但并未实质性侵犯原告权益，法院可能会选择不予撤销。
对于行政处罚中的程序错误，应当撤销原决定，并重新履行调查程序和作出新的决定。当事人如对行政处罚的具体情况有异议，可以提出行政复议认定。
建议在行政行为的实施过程中，行政机关应严格遵守法定程序，确保行政行为的合法性和公正性，以维护法律的严肃性和权威性。