手指关节起小水泡很痒，可能是以下原因引起：
1.汗疱疹：一种对称发生在手掌、足跖、指趾屈侧皮肤的水疱性皮肤病，可能与皮肤癣菌感染、局部过敏或精神因素有关。常伴有不同程度的瘙痒和烧灼感，好发于春末夏初，夏季加重，入冬可自愈。汗疱疹具有自愈倾向，一般不需要特殊治疗，但如果瘙痒明显，可以外用炉甘石洗剂、糖皮质激素软膏等，以缓解症状。如果出现感染，可以外用抗生素软膏，如红霉素软膏、莫匹罗星软膏等。
2.手癣：由真菌感染引起，具有传染性，可通过直接接触或间接接触传播。手癣常发生于单侧手部，表现为水疱、鳞屑、角化、皲裂等，伴有不同程度的瘙痒。手癣的治疗需要使用抗真菌药物，如酮康唑乳膏、特比萘芬乳膏、联苯苄唑乳膏等。如果病情严重，需要口服抗真菌药物，如伊曲康唑胶囊、特比萘芬片等。
3.湿疹：一种慢性炎症性皮肤病，病因复杂，可能与遗传、免疫、环境等因素有关。湿疹可发生于任何部位，表现为红斑、丘疹、水疱、渗出、结痂、脱屑等，伴有瘙痒。湿疹的治疗需要根据病情的严重程度选择合适的治疗方法，如外用糖皮质激素乳膏、钙调磷酸酶抑制剂、抗生素等，必要时口服抗组胺药物、免疫抑制剂等。
4.接触性皮炎：由于皮肤或黏膜接触某些外界物质后，在接触部位发生的炎症反应，表现为红斑、丘疹、水疱、渗出、结痂等，伴有瘙痒或灼痛感。接触性皮炎的治疗需要立即去除病因，避免再次接触致敏物质。轻者可以外用炉甘石洗剂、糖皮质激素乳膏等，重者需要口服抗组胺药物、糖皮质激素等。
手指关节起小水泡很痒，还可能是其他原因引起，建议及时就医，明确诊断，在医生的指导下进行治疗。同时，要注意保持皮肤清洁，避免搔抓，避免接触刺激性物质，避免热水烫洗，避免食用辛辣刺激性食物。