Sin embargo, poco más tarde entró de nuevo en crisis, incluso en la temporada 1972/73 descendió de nuevo a Segunda División, camiseta mundial brasil 2022 momento en que llegó a la clasificación más baja de su historia. En la temporada 1972/73 falleció de forma repentina el jugador Pedro Berruezo durante un partido en el Municipal de Pasarón frente al Pontevedra Club de Fútbol. En la temporada 1974/75, con Eugenio Montes Cabeza de presidente y Roque Olsen como entrenador, el club consiguió de nuevo el ascenso a Primera y se asentó en una larga fase de estabilidad en esta categoría.
