乳腺纤维瘤是否必须要做手术，需要根据具体情况来判断。一般来说，以下情况可能需要手术治疗：
1.纤维瘤较大：如果纤维瘤直径超过2厘米，或者短期内生长迅速，可能会对乳房外观或健康造成影响，需要考虑手术切除。
2.有恶变风险：通过病理检查发现纤维瘤存在恶变倾向，或者患者有乳腺癌家族史等高危因素，手术切除是更安全的选择。
3.影响生活：纤维瘤可能会引起乳房疼痛、乳头溢液等症状，影响生活质量，手术可以缓解这些问题。
4.患者心理压力大：一些患者因为担心纤维瘤会恶变或者对乳房外观不满意，而产生较大的心理压力，手术也可以提供心理上的安慰。
然而，对于一些较小的、生长缓慢的、没有症状的纤维瘤，也可以选择定期复查，观察其变化情况。在复查过程中，如果纤维瘤有增大趋势或者出现其他异常，再考虑手术治疗。
需要注意的是，手术治疗并不是唯一的治疗方法，对于一些特殊情况或者患者的个人意愿，医生可能会建议采用其他治疗方法，如微创旋切术、中医药治疗等。
总之，乳腺纤维瘤是否需要手术治疗应根据多个因素综合考虑，包括纤维瘤的大小、生长速度、症状、恶变风险以及患者的年龄、意愿等。患者在做出决策之前，应与医生充分沟通，了解各种治疗方法的优缺点，并根据自己的情况做出合适的选择。同时，定期复查也是非常重要的，有助于及时发现和处理任何变化。