¿Puedo quedar embarazada con fibromas?

Tengo puesto él diu, y tengo un fibroma subseroso de 11 cm, tengo 35 años, pero ahora con mi pareja queremos un bebe, pero mi ginecólogo dice que no puedo y no quiere retirarme él diu.