4个月宝宝发烧38℃属于低烧，此时可暂不用药，只需密切观察。若宝宝能接受，可采取物理降温来适当调节体温。具体如下：
一、物理降温：
1.温水擦浴：家长可用温水擦拭宝宝颈下、腋下、大腿根部等部位以促进降温，但不可用酒精，因为宝宝皮肤薄易受损，还可能引发酒精中毒。
2.冰敷降温：若家里有冰贴，通常可贴在宝宝额部帮助退热。
3.其他方式：若是因室内环境温度过高导致发热，家长应适当打开门窗通风散热。同时要注意是否因宝宝衣物过多或被子过厚引起发热，若有此类情况需给宝宝减少衣物并进一步观察。
二、医院就诊：
1.感染性：若宝宝因细菌感染发热，可遵医嘱用抗生素类药物抗感染治疗；若是病毒感染，则以物理降温为主。
2.非感染性：若4个月宝宝由于体温调节中枢不完善出现散热异常，或患有血液疾病、结缔组织病等，通常需要明确具体疾病类型后，在医生指导下进行相应治疗。
总结：对于4个月宝宝38℃的低烧，可先观察或采取物理降温，若情况特殊需及时就医，根据不同病因进行针对性治疗。