8个月宝宝发烧37.5℃，先不要过于担心，可以采取以下物理降温方法。
1.减少衣物：如果宝宝发烧时穿得过多，会影响身体散热，导致体温不降反升。因此，需要适当减少宝宝的衣物，以帮助身体散热。
2.温水擦拭：用温水擦拭宝宝的手心、腋窝、腹股沟等部位，通过水分蒸发带走热量，达到降温的目的。
3.多喝水：发烧会导致宝宝体内水分流失，多喝水可以补充水分，防止脱水，同时也有助于调节体温。
4.保持室内通风：保持室内空气流通，可以让宝宝感到更加舒适。
5.注意观察：需要注意观察宝宝的体温变化，如果体温持续升高或出现其他异常症状，应及时就医。
需要注意的是，如果宝宝发烧超过38.5℃，或出现精神萎靡、呼吸急促等异常症状，应及时就医，在医生的指导下使用退烧药。同时，在宝宝发烧期间，应注意保持宝宝的饮食清淡，多喝水，多休息，以帮助身体恢复。