¿Es seguro taladrar un pilar de hormigón de un edificio?

He comprado para hacer ejercicio un rectángulo de hierro con dos poleas en la punta para guiar el cable que tirará de los discos de pesas. En un extremo lleva una placa soldada con 4 orificios a modo de soporte, y un ángulo para dar fuerza al conjunto. Trae la broca para hormigón e incluso tacos de expansión para tal fin.

¿Se debilita la estructura si hago esos 4 agujeros para sujetar este aparato de gimnasia?