4个月宝宝体温37.5°C是正常的。宝宝的正常体温可以波动在一定范围内，通常情况下，口腔温度为36.2°C~37.3°C，腋窝温度为36.0°C~37.0°C，直肠温度为36.5°C~37.7°C。
需要注意的是，宝宝的体温容易受到环境因素的影响，如室温过高、包裹过厚、哭闹等，可能会导致体温暂时性升高，但通常不会超过37.5°C。此外，宝宝的基础体温也可能略高于成人，尤其是在活动后、进食后或哭闹后。
如果宝宝的体温持续升高或伴有其他症状，如咳嗽、流涕、呼吸急促等，可能是生病了，需要及时就医。同时，家长可以采取以下措施来帮助宝宝降温：
减少衣物：适当减少宝宝的衣物，以帮助散热。
保持凉爽：保持室内温度适宜，避免过度闷热。
多喝水：鼓励宝宝多喝水，有助于调节体温。
温水擦拭：用温水擦拭宝宝的额头、颈部、腋窝、腹股沟等部位，帮助散热。
如果宝宝的体温超过38.5°C，或出现精神萎靡、食欲不振等异常情况，应及时就医，并在医生的指导下使用退烧药。同时，家长应该密切观察宝宝的情况，如有异常应及时就医。