五个月大的婴儿发烧至37.5°C时，可以采取以下措施：
1.观察婴儿的状态：首先，需要观察婴儿的状态，包括是否有哭闹、精神不振、呼吸急促等异常情况。如果婴儿状态良好，可以先尝试物理降温的方法。
2.减少衣物：适当减少婴儿的衣物，避免过多的衣物导致体温过高。但要注意保持婴儿的温暖，避免着凉。
3.多喝水：让婴儿多喝水，可以补充身体所需的水分，防止脱水。
4.温水擦拭：用温水擦拭婴儿的身体，尤其是颈部、腋窝、腹股沟等部位，帮助散热。但要注意水温不宜过高，避免烫伤婴儿。
5.保持室内通风：保持室内空气流通，温度适宜，可以帮助降低体温。
6.观察体温变化：需要密切观察婴儿的体温变化，如果体温持续升高或出现其他异常症状，应及时就医。
需要注意的是，婴儿的体温调节功能尚未完全发育成熟，因此对于体温的变化较为敏感。如果婴儿的体温超过38.5°C，或者出现其他异常症状，应及时就医，在医生的指导下进行治疗。同时，在就医前应避免给婴儿使用退烧药，以免影响医生的诊断。