行政处罚法规定，执法人员与当事人有直接利害关系的，应当回避。所谓与本案有直接利害关系，是指执法人员本人是当事人;或者是本案当事人的近亲属，案件处理的结果可能对其权益产生影响等情况。所谓可能影响公正处理的其他关系，是指除上述有利害关系以外的关系，如朋友关系、师生关系等，有可能利用这些关系影响对案件的公正处理的情况。
根据《行政诉讼法》第47条规定，回避有两种：当事人申请回避和审判人员主动回避。当事人申请回避是当事人认为审判人员与本案有利害关系或者有其他关系可能影响公正审判，有权申请审判人员回避。根据《最高法院解释》第47条规定，当事人申请回避，应当说明理由，在案件开始审理时提出;回避事由在案件开始审理后知道的，应当在法庭辩论终结前提出。被申请回避的人员，在人民法院作出是否回避的决定前，应当暂停参与本案的工作，但案件需要采取紧急措施的除外。对当事人提出的回避申请，人民法院应当在3日内以口头或者书面形式决定。院长担任审判长时的回避，由审判委员会决定;审判人员的回避，由院长决定;申请人对驳回回避申请决定不服的，可以向作出决定的人民法院申请复议一次。复议期间，被申请回避的人员不停止参与本案的工作。对申请人的复议申请，人民法院应当在 3日内作出复议决定，并通知复议申请人。审判人员主动回避是审判人员认为自己与本案有利害关系或者有其他关系，应当申请回避。
回避的规定同时适用于其他人员：书记员、翻译人员、鉴定人、勘验人。其他人员的回避，由审判长决定。
二、行政听证的相关规定
根据《中华人民共和国行政处罚法》第四十二条 行政机关作出责令停产停业、吊销许可证或者执照、较大数额罚款等行政处罚决定之前，应当告知当事人有要求举行听证的权利;当事人要求听证的，行政机关应当组织听证。当事人不承担行政机关组织听证的费用。听证依照以下程序组织：
(一)当事人要求听证的，应当在行政机关告知后三日内提出;
(二)行政机关应当在听证的七日前，通知当事人举行听证的时间、地点;
(三)除涉及国家秘密、商业秘密或者个人隐私外，听证公开举行;
(四)听证由行政机关指定的非本案调查人员主持;当事人认为主持人与本案有直接利害关系的，有权申请回避;
(五)当事人可以亲自参加听证，也可以委托一至二人代理;
(六)举行听证时，调查人员提出当事人违法的事实、证据和行政处罚建议;当事人进行申辩和质证;
(七)听证应当制作笔录;笔录应当交当事人审核无误后签字或者盖章。
当事人对限制人身自由的行政处罚有异议的，依照治安管理处罚条例有关规定执行。
关于行政许可听证，这也是很常见的一种行政执法，其实在一般的行政处罚、行政听证或行政诉讼的过程当中，在以上特殊情况下都适用于回避原则，因为工作人员如果不回避的话，也没办法确保最终结果的公正性。一般的行政许可也不需要举行听证会。
延伸阅读：
行政许可事项是什么意思？行政许可事项有哪些？
行政许可和行政审批有什么区别？
行政许可是行政处理行为吗?
