小孩子发烧37.5°C时，可以采取以下物理降温方法：
1.温水擦拭：用温水（水温32℃-34℃）擦拭孩子的手心、腋窝、腹股沟等部位，通过水分蒸发带走热量，达到降温的目的。
2.多喝水：让孩子多喝水，补充水分，有助于调节体温，促进新陈代谢。
3.多休息：保证孩子充足的睡眠，让身体有足够的时间恢复。
同时，要密切观察孩子的体温变化和精神状态。如果孩子的体温持续升高（超过38.5°C）或出现其他异常症状，如咳嗽、呕吐、腹泻、呼吸急促等，应及时就医。在就医过程中，应告知医生孩子的体温情况和症状，以便医生进行准确的诊断和治疗。
此外，需要注意的是，不同年龄段的孩子对发热的耐受性不同，因此在处理孩子发热时，需要根据孩子的具体情况进行判断。如果孩子的精神状态良好，饮食正常，可以先在家观察并采取物理降温措施。如果孩子的精神状态不佳，或出现其他异常症状，应及时就医。同时，在孩子发热期间，应注意保持室内空气流通，给孩子穿着适当的衣物，避免过多或过少。