手指上起小水泡很痒可能由过敏、真菌感染、汗疱疹、水疱型手癣引起。具体原因如下：
一、过敏：
1.手常受到物理和化学刺激，比如接触热水、肥皂、洗衣粉、洗涤剂等，一些特殊职业人群常接触发动机机油、化学试剂等，会导致手部皮肤过敏。
二、真菌感染：
1.手上有汗液未及时擦干等处于潮湿温热状态时易引发真菌感染。
2.真菌感染后会出现手部皮肤起泡，且手频繁接触物品易发生感染从而引起瘙痒。
三、汗疱疹：
1.汗疱疹又称出汗不良，是一种周期性水疱疾病，常发生在掌跖部或手指部，会导致手指起小水泡且很痒。
四、水疱型手癣：
1.由浅表致病性真菌感染引起的手掌和手指皮肤感染性皮肤病。
2.皮肤损伤一般发生在戴戒指的指根或手指皮肤处。
手指上起小水泡很痒的注意事项有：首先应积极寻找过敏原，避免接触，严重时遵医嘱进行抗过敏治疗；其次要注意个人卫生，注重日常护理，手上有汗液及时擦干，瘙痒严重时可用冷敷缓解；再者由于水疱型手癣痒感强烈，要避免搔抓，忌辛辣食物。
总之，当手指出现起小水泡很痒的情况时，要明确具体原因，采取相应的处理措施和注意相关事项。