当小孩低烧37.5℃时，不建议立即使用药物。以下是一些可以采取的措施：
1.观察小孩的情况：注意观察小孩的精神状态、饮食、睡眠等情况，以及体温的变化趋势。如果小孩的情况良好，体温没有继续上升，可以先在家中观察。
2.保持适当的环境：确保小孩所处的环境舒适、通风，保持适宜的温度和湿度。可以给小孩穿着适当的衣物，避免过多或过少。
3.多喝水：鼓励小孩多喝水，以补充因发热而流失的水分。水还可以帮助调节体温。
4.注意休息：让小孩多休息，避免过度活动，以帮助身体恢复。
如果小孩的体温持续升高或出现其他不适症状，如咳嗽、喉咙痛、头痛等，或者观察到小孩的精神状态不佳，应及时就医。医生会根据小孩的具体情况进行评估，并给出相应的治疗建议。
在就医时，医生可能会进行进一步的检查，如血常规等，以确定发热的原因。根据检查结果，医生可能会开具药物治疗，如退烧药（对乙酰氨基酚或布洛芬）等。但这些药物都应该在医生的指导下使用，并且要按照正确的剂量和使用方法。
此外，对于一些特殊人群，如婴儿、幼儿、老年人、患有基础疾病的人等，低烧37.5℃也需要引起重视。这些人群的身体状况可能较为脆弱，对发热的反应也可能不同，因此在处理低烧时需要更加谨慎。如果对小孩的健康状况有任何疑虑，最好及时咨询医生的意见。
总之，当小孩低烧37.5℃时，应先观察小孩的情况，采取适当的措施，并根据需要及时就医。在使用药物治疗时，要遵循医生的建议，不要自行用药。同时，要密切关注小孩的病情变化，确保其健康安全。