儿童37.5℃算不算发烧需要根据测量部位来判断，具体分析如下：
口腔温度：儿童的口腔温度正常范围为36.2℃至37.3℃，因此口腔温度为37.5℃属于发烧。
腋窝温度：腋窝温度的正常范围为36℃至37℃，所以腋窝温度为37.5℃不属于发烧。
直肠温度：直肠温度的正常范围为36.5℃至37.7℃，直肠温度为37.5℃也不属于发烧。
需要注意的是，测量体温时要选择合适的测量部位，并在测量前确保测量部位清洁干燥，测量时间也要足够。此外，儿童的体温可能会受到环境、活动、饮食等因素的影响，因此单次测量的体温略高于正常范围并不一定意味着发烧，需要多次测量并结合其他症状进行综合判断。
如果儿童除了体温升高外，还伴有咳嗽、流涕、喉咙痛等症状，可能是感冒、流感等上呼吸道感染引起的。如果儿童出现高热、精神萎靡、呼吸急促等症状，可能是肺炎、脑膜炎等严重疾病引起的。此时，需要及时带儿童就医，进行相关检查和治疗。
对于3个月以下的婴儿，如果体温超过38℃，无论是什么原因，都应该及时就医。因为婴儿的免疫系统尚未完全发育成熟，感染后容易迅速发展成严重的疾病。
总之，儿童37.5℃算不算发烧需要根据具体情况进行判断。如果家长对儿童的体温感到担忧，可以咨询医生的意见。同时，要密切观察儿童的症状变化，如有异常应及时就医。