卫生法行政责任的判定需要综合多方面因素，从责任主体、违法行为、因果关系、主观过错等方面进行全面考量。

首先，明确责任主体是判定卫生法行政责任的基础。责任主体包括卫生行政机关及其工作人员、医疗卫生机构、卫生技术人员以及其他与卫生管理活动相关的公民、法人或其他组织。不同的主体在卫生法律关系中承担着不同的职责和义务，只有确定了具体的责任主体，才能进一步判断其是否应当承担行政责任。

其次，要判断是否存在违反卫生法律法规的行为。这些违法行为的表现形式多样，可能是作为，如医疗机构违法发布虚假医疗广告、卫生技术人员违规操作等；也可能是不作为，如卫生行政部门对符合条件的申请拖延审批等。判定违法行为是否存在，需要依据明确的卫生法律法规条文，看行为是否符合法律规定的禁止性或义务性条款。

再者，违法行为与损害后果之间的因果关系是判定行政责任的重要环节。损害后果既包括对公民、法人或其他组织的人身、财产权益造成的实际损害，也包括对卫生行政管理秩序的破坏。只有当违法行为与损害后果之间存在直接的、必然的因果联系时，责任主体才需要承担相应的行政责任。

另外，主观过错也是判定的因素之一。虽然在一些卫生行政责任中实行无过错责任原则，但在很多情况下，需要考虑责任主体是否存在故意或过失。故意是指责任主体明知自己的行为会违反卫生法律法规，仍然积极实施该行为；过失则是指应当预见自己的行为可能违反卫生法律法规，但因疏忽大意而没有预见，或者已经预见但轻信能够避免。

最后，判定卫生法行政责任还需要遵循法定程序。卫生行政部门在进行责任判定时，必须按照法定的步骤和要求进行调查取证、听取当事人陈述和申辩、作出处罚决定等，以确保判定结果的合法性和公正性。

总之，卫生法行政责任的判定是一个复杂的过程，需要综合考虑责任主体、违法行为、因果关系、主观过错以及法定程序等多方面因素，以准确认定责任，维护卫生行政管理秩序和公民、法人及其他组织的合法权益。