先动手打人者需要承担行政责任或刑事责任。
详细解释如下：
当一个人先动手打人，其行为已经构成了对他人身体的侵犯，应当承担相应的法律责任。依据我国法律的相关规定，这种行为可能导致的法律责任主要有两个方面：
一、行政责任。根据《治安管理处罚法》，打人行为属于违法行为，会受到行政处罚。公安机关会根据情节严重程度，对打人者进行警告、罚款、拘留等处罚。这一责任的判定通常基于伤害的程度以及是否构成犯罪等因素。
二、刑事责任。如果打人行为造成了严重后果，如被害人受到轻伤或以上伤害，打人者则可能涉嫌犯罪，需要承担刑事责任。我国刑法对此类行为有明确的规定，如故意伤害罪等，并根据伤害的程度给予相应的刑事处罚。
此外，除了法律责任，打人者还可能需要对被害人进行民事赔偿，包括医疗费、误工费、精神损失费等。
总之，无论出于何种原因，先动手打人的行为都是不被法律所容许的。每个人都应当遵守法律法规，遇到矛盾冲突时通过合法途径解决，杜绝暴力行为。