小孩体温37.4℃是否算发烧需根据测量部位来判断。若测腋下温度，正常应在36℃至37℃，则37.4℃属发烧；若测口腔温度，正常应为36.2℃至37.2℃，37.4℃也属发烧范畴；若测直肠肛门温度，正常在36.5℃至37.5℃，37.4℃则属正常范围。若为腋下或口腔温度，小孩处于低度热。此时可采取以下方法缓解不适。
一、物理降温
1.可先让孩子多喝温水，通过多喝水促进排汗、排尿以帮助退热。
2.用温水擦拭小孩身体，重点并反复擦拭额头、颈部两侧、腋下、腹股沟、腘窝、肘窝等大动脉走行部位来降温，注意不可将白酒或酒精加入擦拭的温水中，以防酒精透过皮肤被吸收产生不良反应。
3.还可让小孩泡温水澡、贴降温贴来降温。
二、药物降温
1.物理降温后若体温没降反而持续上升，超过38.5℃，建议及时就医，可遵医嘱口服退热药物治疗。小孩常用退热药物主要有两种，即布洛芬类退烧药和对乙酰氨基酚类退烧药，但温度不太高时建议就医前勿自行服用，以免掩盖症状干扰医生诊断。
2.若服用退热药物后体温仍上升，建议进行血常规、胸片等相关检查，查看是否存在感染症状。同时小孩饮食应以清淡、易消化食物为主，如小米粥、虾仁粥、疙瘩汤等，利于身体恢复。
总之，对于小孩37.4℃的体温要准确判断是否发烧及发烧程度，采取合适的降温方法，必要时及时就医检查和治疗，同时注意饮食调理。