治疗闭口粉刺的药膏主要有以下几种：
1.维A酸乳膏：这是一种常用的治疗闭口粉刺的药膏，主要成分是维A酸。它可以调节表皮角质形成细胞的分化，减少皮脂分泌，同时还具有抗炎作用。使用时需注意避光，建议睡前使用。
2.过氧化苯甲酰凝胶：过氧化苯甲酰具有强氧化性，能够杀灭痤疮丙酸杆菌，还可以减少皮脂分泌。使用时可能会出现皮肤干燥、脱屑等不良反应，建议从低浓度、小面积开始使用。
3.壬二酸乳膏：壬二酸可以减少皮肤油脂分泌，抑制痤疮丙酸杆菌，还具有抗炎作用。对痤疮丙酸杆菌和表皮葡萄球菌都有抗菌活性，对马拉色菌也有一定的抑制作用。使用时可能会出现皮肤红斑、瘙痒等不良反应。
4.抗生素类药膏：如红霉素软膏、克林霉素磷酸酯凝胶等，这类药膏主要用于炎症性丘疹、脓疱的治疗。使用时需注意过敏反应。
需要注意的是，不同类型的闭口粉刺可能需要不同的治疗方法，使用药膏时应遵循医生的建议，按照说明书正确使用。同时，还应注意皮肤清洁，避免挤压粉刺，以免引起感染和炎症扩散。如果闭口粉刺较为严重，或使用药膏后症状无明显改善，应及时就医，接受专业治疗。