通常情况下，婴儿的正常体温在36.5°C至37.5°C之间，因此，当婴儿的体温达到37.5°C时，并不算发烧。
然而，需要注意的是，婴儿的体温可能会受到多种因素的影响而有所波动，例如环境温度、穿衣过多、哭闹、进食等。因此，在判断婴儿是否发烧时，需要综合考虑这些因素。
如果婴儿除了体温升高外，还出现了其他症状，如咳嗽、流鼻涕、腹泻、呕吐等，那么可能是生病了，需要及时就医。此外，如果婴儿的体温持续升高或出现精神萎靡、食欲不振等异常情况，也需要引起重视，及时咨询医生的建议。
对于家长来说，在日常生活中需要注意保持婴儿的舒适和清洁，避免过度穿衣和包裹，保持室内温度适宜。同时，定期测量婴儿的体温，关注其身体变化，如有异常及时就医，是非常重要的。
总之，当婴儿的体温为37.5°C时，不一定是发烧，但需要密切观察其身体状况，如有需要及时就医。