小孩发烧38.4°C时，不一定需要马上去医院，可以先采取以下措施：
1.观察症状：除了发烧，还要注意观察小孩的其他症状，如咳嗽、流鼻涕、喉咙痛、腹泻、呕吐等。同时，注意小孩的精神状态、饮食情况和睡眠质量。
2.保持水分摄入：让小孩多喝水或口服补液盐，以防止脱水。
3.适当降低环境温度：给小孩穿着宽松、透气的衣物，保持室内空气流通，适当降低环境温度。
4.物理降温：可以使用温水擦拭手心、腋窝、腹股沟等部位，或使用退热贴。但需要注意，不要给小孩使用酒精擦浴。
5.密切观察体温变化：每1-2小时测量一次体温，记录体温变化情况。
如果小孩出现以下情况，应考虑前往医院就诊：
1.年龄小于3个月的婴儿发烧。
2.发烧持续时间超过3天。
3.体温反复升高，或使用退烧药后体温下降不明显。
4.出现精神萎靡、嗜睡、烦躁不安、抽搐等异常表现。
5.出现呼吸急促、呼吸困难、喘息等症状。
6.出现皮肤苍白、发冷、发绀、尿量减少等情况。
7.有高热惊厥史的小孩再次发烧。
需要注意的是，每个小孩的情况都不同，如果对小孩的健康状况有任何疑虑，最好咨询医生的意见。此外，在前往医院就诊时，应佩戴口罩，避免交叉感染。