根据你提供的信息，耳垂后长了一个小包一按就疼，可能是由以下原因引起：
1.皮脂腺囊肿：由于皮脂腺排泄管阻塞，皮脂腺囊状上皮被逐渐增多的内容物膨胀所形成的潴留性囊肿。这是一种良性疾病，通常不会恶变，但可能会感染，引起疼痛。你可以口服抗生素，如头孢呋辛酯片，外用百多邦软膏。如果感染严重，形成脓肿，则需要手术切开引流。
2.淋巴结炎：耳部及其周围组织的感染，可引起局部淋巴结肿大，伴有疼痛。你可以口服抗生素，如阿莫西林胶囊，同时局部热敷。一般炎症消退后，淋巴结会恢复正常大小。
3.其他：还有可能是脂肪瘤、表皮样囊肿、皮肤纤维瘤等，这些都是良性肿瘤，一般不需要治疗，如果影响美观或有恶变倾向，可以手术切除。
如果小包持续不消失或加重，建议你及时就医，明确诊断，以便采取相应的治疗措施。