如果在刮胡子时不小心把嘴唇刮破了，可以采取以下措施：
1.清洁伤口：立即用清水或生理盐水冲洗伤口，去除伤口周围的污垢和细菌。
2.止血：如果伤口有出血，可以用干净的纱布或毛巾轻轻按压伤口，直到止血。
3.消毒：用酒精或碘酒消毒伤口，避免感染。
4.涂抹药膏：可以在伤口上涂抹一些抗生素药膏或消炎药膏，帮助伤口愈合。
5.避免刺激：避免用手触摸或刺激伤口，避免食用辛辣、刺激性食物，以免加重伤口疼痛和感染。
6.观察伤口：密切观察伤口的情况，如果伤口出现红肿、疼痛、渗液等异常情况，应及时就医。
需要注意的是，如果嘴唇刮破的情况比较严重，或者伤口难以止血，应及时就医，以免延误病情。此外，对于一些特殊人群，如糖尿病患者、免疫功能低下者等，刮胡子时更要小心，避免伤口感染和加重。如果不确定如何处理伤口，最好咨询医生的意见。