小孩子发烧且手脚冰冷时需要采取一系列措施，包括给小孩测量体温，以及根据情况进行物理治疗或药物治疗。
一、物理治疗
发烧期间，如果体温未超过38.5℃，通常可以实施物理降温。1.可以用毛巾擦拭小孩子的额头、腋窝、手脚等部位，通过水分蒸发来带走热量。2.选择给孩子洗温水澡，这有助于降低身体温度，对缓解发烧手脚冰凉状况有帮助。3.使用退热贴贴敷，这也是一种较为有效的方法。
二、药物治疗
要是体温超过38.5℃，则可考虑进行药物治疗，例如可以使用对乙酰氨基酚、布洛芬等药物，以防止小孩子出现高热惊厥。
提醒患者：用药务必严格遵循医嘱，若有任何不适症状出现，需及时就医进行检查和治疗。
总结：当小孩子发烧手脚冰冷时，要重视体温测量，并根据体温情况选择合适的物理或药物治疗方法，同时要注意遵医嘱用药，有异常及时就医。