一般情况下，新生儿腋下体温37.4°C是正常的，但需要注意以下几点。
首先，新生儿的体温调节功能尚未完全发育成熟，体温容易受到环境温度、穿着、进食等因素的影响。因此，在测量体温时，需要选择合适的测量方法和时间，并在测量前确保新生儿处于安静、舒适的状态。
其次，腋下体温37.4°C可能是正常的生理现象，但也可能是疾病的早期表现。如果新生儿同时伴有哭闹、呼吸急促、吃奶差等异常症状，需要及时就医，以排除感染等疾病的可能。
最后，需要注意的是，新生儿的体温波动较大，一天内的体温可能会有一定的变化。因此，建议家长定期监测新生儿的体温，并记录体温变化情况。如果体温持续升高或出现其他异常症状，应及时就医。
总之，新生儿腋下体温37.4°C可能是正常的，但也需要密切观察。如果有任何疑问，建议及时咨询医生。