乳腺纤维瘤是否严重以及是否可以不做手术，需要根据具体情况进行分析，不能一概而论。
一般来说，乳腺纤维瘤是一种良性肿瘤，通常生长缓慢，很少恶变。大多数患者无明显症状，常在无意中发现乳房肿块，多为单发，也可多个在一侧或两侧乳房出现，肿块呈圆形或椭圆形，质地韧，边界清楚，表面光滑，与周围组织无粘连，可推动。少数患者可能会出现乳房疼痛或乳头溢液等症状。
对于乳腺纤维瘤的治疗，主要包括手术治疗和非手术治疗两种方法。手术治疗是目前治疗乳腺纤维瘤的主要方法，一般适用于肿块较大、生长较快、有恶变倾向或患者有强烈手术意愿的情况。非手术治疗包括药物治疗、中医治疗等，一般适用于肿块较小、生长缓慢、无明显症状的患者。
需要注意的是，对于乳腺纤维瘤的治疗，需要综合考虑患者的年龄、症状、肿块大小、生长速度等因素，以及患者的个人意愿和需求。对于年轻患者、肿块较小、生长缓慢、无明显症状的患者，可以选择定期复查，观察肿块的变化情况。对于年龄较大、肿块较大、生长较快、有恶变倾向或患者有强烈手术意愿的患者，应及时手术治疗，以避免延误病情。
此外，乳腺纤维瘤的发生与患者的内分泌失调有关，因此，患者在日常生活中应注意保持良好的生活习惯和饮食习惯，避免熬夜、过度劳累，保持心情舒畅，避免情绪波动，少吃辛辣刺激性食物，多吃新鲜的蔬菜和水果，有助于预防和控制乳腺纤维瘤的发生和发展。
总之，乳腺纤维瘤是否严重以及是否可以不做手术，需要根据具体情况进行分析。患者应及时就医，在医生的指导下选择合适的治疗方法。