4个月宝宝37.5℃算发烧。宝宝的正常体温在36.5℃至37.5℃之间，因此宝宝体温37.5℃属于正常范围。但需要注意的是，宝宝的体温可能会受到环境、活动、饮食等因素的影响，因此需要结合实际情况进行判断。
如果宝宝的体温在37.5℃以下，且精神状态良好，没有其他异常症状，可以先观察一段时间，给宝宝多喝水，注意保持室内空气流通。如果宝宝的体温持续升高，或者出现了其他异常症状，如咳嗽、流鼻涕、腹泻等，需要及时就医，以便明确病因，并采取相应的治疗措施。
此外，需要注意的是，宝宝的体温调节功能尚未完全发育成熟，因此在测量体温时需要注意正确的方法。一般来说，可以使用电子体温计或水银体温计测量宝宝的腋下温度，测量时间为5至10分钟。在测量体温前，需要将体温计的探头擦拭干净，并确保宝宝的腋下没有汗水。
同时，需要注意的是，不同的体温计可能会存在一定的误差，因此在测量体温时需要选择可靠的体温计，并按照正确的方法进行测量。如果对宝宝的体温情况有任何疑问，建议及时咨询医生或专业的医疗机构。