如果不小心把牙磕碎了一小块，不要惊慌，可以采取以下措施：
1.检查口腔：用镜子或他人协助观察口腔内牙齿的情况，确定损伤的位置和程度。
2.清洁口腔：在就诊前，使用干净的水轻轻漱口，去除口腔内的血迹和碎片，但不要用力漱口或刷牙，以免加重损伤。
3.避免用受伤的牙齿咀嚼：避免用受伤的牙齿咀嚼食物，以免加重损伤或导致疼痛加剧。
4.及时就医：尽快前往口腔医院或口腔科就诊。医生会根据损伤的具体情况，制定相应的治疗方案。
需要注意的是，如果牙碎的面积较大或涉及到牙髓（牙齿内部的神经组织），可能需要进行根管治疗或其他进一步的修复治疗。此外，如果受伤的牙齿出现明显的松动或疼痛，应及时就医，以免延误病情。
总之，如果不小心把牙磕碎了一小块，应及时就医，以便获得正确的治疗和建议。同时，在治疗期间，应注意口腔卫生，避免食用辛辣、坚硬的食物，以促进牙齿的恢复。