根据你提供的信息，这种情况可能是水疱型手癣或足癣，也可能是汗疱疹。这两种疾病都可能导致手指或脚趾出现小水疱，伴有瘙痒。
手癣或足癣是由真菌感染引起的，具有传染性。水疱型手癣或足癣通常在夏季加重，冬季减轻。除了水疱和瘙痒外，还可能出现皮肤增厚、脱屑等症状。治疗方法包括使用抗真菌药物，如酮康唑、克霉唑等。同时，要注意保持皮肤清洁，避免与他人共用毛巾、拖鞋等物品。
汗疱疹则是一种湿疹，与过敏、精神紧张等因素有关。水疱型汗疱疹通常在夏季发作，冬季缓解。除了水疱和瘙痒外，还可能出现皮肤干燥、脱屑等症状。治疗方法包括使用糖皮质激素软膏、炉甘石洗剂等。同时，要注意避免接触过敏原，保持心情舒畅。
需要注意的是，以上只是一些常见的情况，还有其他疾病可能导致类似症状。如果症状持续不缓解或加重，建议及时就医，进行相关检查和诊断，并根据医生的建议进行治疗。
对于特殊人群，如孕妇、儿童、老年人等，治疗方法可能有所不同。在使用药物之前，最好咨询医生的意见，避免使用对胎儿或儿童有影响的药物。同时，要注意保持皮肤清洁，避免搔抓，以免引起感染或加重症状。
总之，如果手指或脚趾长小水疱并伴有瘙痒，建议及时就医，进行相关检查和诊断，并根据医生的建议进行治疗。同时，要注意保持皮肤清洁，避免搔抓，避免接触过敏原，保持心情舒畅。