宝宝体温达到37.5度属于低烧，且四个月的宝宝年龄极小，此时采用物理方法退烧是较为理想的选择，若物理方法无效，再考虑药物治疗或送医。
一、物理治疗
1.要确保宝宝所处环境通风良好，不应过于封闭，将宝宝放置在空气较为流通的地方。同时，宝宝的衣物不可过多，可适当减少，切不可采用盖被子捂汗的方式，以免对宝宝造成更大伤害。
2.可以使用毛巾或退热贴，将其贴敷在额头或腋下等部位，也可以用毛巾擦拭宝宝身体，这些方法都有助于退热。
3.由于发烧会导致宝宝体内水分流失，所以要多给宝宝喝水，以促进退热。
二、药物治疗
如果宝宝经物理退烧后效果不佳，可以使用药物进行治疗，比如小儿柴桂颗粒。若存在感染，需根据感染的类型和部位，选择合适的抗生素或抗病毒药物，通过控制炎症来改善体温状况。宝宝处于低烧状态时不必过分担忧，能仅通过物理治疗实现退烧是最好的，毕竟宝宝只有四个月大，最好尽量避免服用药物。但如果使用物理方法后仍无退烧迹象，应尽快前往医院就诊治疗，以免耽误病情。
总结提示：对于四个月宝宝的低烧情况，可先尝试物理治疗，包括改善环境、调整衣物、使用退热贴或毛巾擦拭以及补充水分等，若物理方法无效再考虑药物治疗，必要时及时送医，要根据具体情况灵活处理。