乳腺纤维瘤的发病原因目前还不是十分清楚，可能是体内雌激素水平相对或绝对升高，导致乳腺导管上皮和间质成分异常增生，形成肿瘤。月经初潮年龄小于12岁或绝经年龄大于55岁者，绝经后雌激素水平高或采用雌激素替代治疗者，生育第一胎的年龄大于35岁者，或未生育、产后未哺乳者，月经周期短者，由于雌激素作用时间较长，是乳腺纤维瘤的高发人群。
有的患者可能是局部乳腺组织对雌激素过度敏感所致。正常乳腺的各组织对雌激素敏感性高低不一，敏感性高的组织发病率明显增加。妊娠期乳房腺泡、间质迅速生长，是容易发生过度增生、形成肿瘤的时期，原来存在的纤维腺瘤在此时也容易加快生长。
饮食及身体因素，如高脂高能量饮食、肥胖、肝功能障碍等，也会使体内雌激素增多，刺激乳腺导管上皮及间质纤维组织增生，引起本病。
遗传因素对形成本病的倾向不容忽视。第一代亲属（母亲、姐妹等）中如果有乳腺纤维瘤患者，本人发病风险就比较高。
患者如果是产妇，对宝宝哺乳有可能使乳腺纤维瘤变大，但不会导致癌变。
乳腺纤维瘤在临床上有大小、常见和罕见及“善恶”之分。普通型乳腺纤维瘤最常见，瘤体小，生长缓慢，一般在3厘米以下。青春型乳腺纤维瘤大多发生在月经初潮期，较少见，特点是生长较快，瘤体较大，病程在1年左右即可占满全乳房，最大直径达10～13厘米。巨纤维腺瘤可见于妊娠、哺乳、围闭经期妇女，特点是体积较大，偶可形成肉瘤。
虽然乳腺纤维瘤的恶变率很低，但女性在妊娠期，乳腺纤维瘤会突然长大，变成肉瘤；40岁以上的女性，在绝经期及绝经后发生纤维瘤者，恶变的风险增高；患有乳腺囊性增生的患者如同时患有乳腺纤维瘤，亦会同时增加患乳腺癌的风险。因此，一旦发现患有乳腺纤维瘤，应积极诊断治疗。
非手术治疗的乳腺纤维瘤患者，一定要重视药物治疗和生活调养，还需要定期检查。