Nació en 1919 en la Ciudad de México. Tuvo uno de sus primeros encuentros con la arquitectura en un viaje que hizo en la adolescencia, cuando quedó fascinado por la Acrópolis de Grecia. Estudió arquitectura en la Universidad Nacional Autónoma de México, de la que egresó en 1943.
En sus primeros años de carrera, diseñó una estructura para escuelas rurales que dio origen a 35,000 escuelas de todo México. Eventualmente se convertiría en uno de los arquitectos más prolíficos de México, con una carrera que abarcaría casi siete décadas. Ramírez Vázquez diseñó pabellones de México en tres ferias mundiales, y fue el rector fundador de la Universidad Autónoma Metropolitana. Además, estuvo a cargo de crear la identidad visual y el icónico logo de los Juegos Olímpicos de México 1968.