治疗闭合性粉刺可以使用的药膏有以下几种：
1.外用维A酸乳膏：这是一种常用的治疗闭合性粉刺的药膏，主要成分是维A酸，能调节表皮角质形成细胞的分化，使粉刺溶解和排出。
2.过氧苯甲酰凝胶：这种药膏可以杀灭痤疮丙酸杆菌，还能减少皮脂分泌，并有抗炎作用。
3.壬二酸乳膏：对痤疮丙酸杆菌有抑制作用，还可以减少皮肤油脂分泌，并有一定的美白作用。
需要注意的是，使用这些药膏时应遵循医生的建议，按照说明书的要求正确使用。同时，还要注意皮肤的清洁和保湿，避免挤压粉刺，以免引起感染和炎症扩散。如果症状严重或持续不愈，建议及时就医，以便进行更针对性的治疗。