Cerezo que pierde el fruto

Mi cerezo da flor y empieza a salir el fruto. Mucho antes de empezar a colorear, amanece un día sin fruto y no hay nada en el suelo: ni fruto ni tallo que lo sostenía. A veces el fruto se muestra pocho aun en su fase inicial. Lleva unos 4 años con este problema. ¿A qué se puede deber? No veo bichos ni nada raro.