结论：体温37.5℃算不算发烧，需要根据具体情况来判断。
原因：一般来说，腋窝温度超过37℃可认为是发热，体温在37.5℃~38℃为低热，38.1℃~39℃为中度发热，39.1℃~41℃为高热，41℃以上为超高热。但以下情况需要注意：
测量时间：测量体温的时间和部位会影响结果。如果是在剧烈运动、进食后、喝热水后或使用了某些药物后测量，体温可能会偏高。
年龄：儿童和老年人的体温相对成年人较低，在某些情况下，体温37.5℃可能是正常的。
基础体温：每个人的基础体温不同，如果平时基础体温较低，稍微升高就可能达到37.5℃。
环境因素：在高温环境下或穿着过多衣物时，也可能导致体温升高。
因此，如果没有其他不适症状，体温37.5℃且能自行消退，可以先观察。但如果伴有头痛、乏力、咳嗽等症状，或体温持续升高，应及时就医，明确原因，并在医生的指导下进行治疗。同时，要注意休息，多喝水，保持室内通风。此外，测量体温时应选择正确的方法和时间，并保持腋窝干燥。如果对体温升高有疑虑，可咨询医生或药师。