儿童腋下体温37.5℃算不算发烧，需要根据测量的时间、测量的部位、儿童的年龄以及基础体温等因素来综合判断。
如果是在腋窝测量，儿童的正常体温是36℃-37.2℃，因此37.5℃属于低烧。但如果是在口腔或直肠测量，正常体温是36.3℃-37.5℃，则不算发烧。
此外，不同年龄的儿童正常体温也有所差异。一般来说，新生儿体温略高于成年人，儿童的体温会略高于成年人，而老年人的体温则略低于成年人。
如果儿童在剧烈运动、哭闹、进餐后，或者从高温环境进入空调房等情况下测量体温，可能会导致体温暂时性升高，但通常不会超过38℃。这种情况下，可以等待一段时间后再次测量，或者选择在儿童安静、状态平稳时测量。
如果儿童除了低烧外，还伴有咳嗽、流涕、呕吐、腹泻等症状，或者体温持续升高、精神状态不佳，应考虑是疾病引起的发烧，需要及时就医，明确病因，并在医生的指导下进行治疗。
在处理儿童发烧时，家长可以采取以下措施：
注意观察儿童的精神状态和症状变化，如果出现异常，应及时就医。
给儿童多喝水，以补充因发烧而流失的水分。
保持室内空气流通，注意给儿童增减衣物，避免穿着过多或过少。
可以使用温水擦拭儿童的颈部、腋窝、肘窝、腹股沟等部位，帮助降温。但要注意避免过度保暖，以免影响散热。
不要自行给儿童使用退烧药，尤其是含有阿司匹林、对乙酰氨基酚等成分的药物，以免引起不良反应。如果需要使用退烧药，应在医生的指导下使用。
总之，儿童腋下体温37.5℃是否算发烧，需要综合考虑多种因素。如果家长对儿童的体温或健康状况有任何疑虑，应及时咨询医生，以便获得更专业的建议和治疗。同时，家长应密切关注儿童的病情变化，如有需要，应及时就医。