A primeira partida documentada deste clube foi em quinta-feira, 8 de setembro de 1910, contra o Cádiz Sporting Club, com vitória de 1 a 0. DOIS DIAS depois, em 10 de setembro, um grupo de cidadãos de Cádiz pediu ao Governo Civil o registro de um clube com o nome Cádiz Foot-Ball Club. Um dos fundadores foi José Rivera y Lora, o primeiro presidente.
Em 1911 o clube se inscreveu na Federação do Sul. A Guerra Civil interrompeu as competições e a casa só jogou amistosos, entre outros contra o BETIS e o Celta de Vigo. A primeira temporada completa de segunda divisão foi 1939-40, e o clube terminou em PRIMEIRO do Grupo 5 com onze vitórias em quatorze jogos, sob o comando de Santiago Núñez, que era treinador e jogador ao mesmo tempo.
Naquele time estavam Roldán, Díaz, Mateo, o goleiro Bueno, que depois jogaria no Real Madrid, e Camilo Liz, que décadas mais tarde virou secretário técnico do clube. Entre 1929 e 1977 esta casa jogou APENAS a segunda ou a terceira divisão. A primeira subida a LaLiga veio em 5 de junho de 1977, com um 2 a 0 sobre o Tarrasa no Ramón de Carranza.
Caiu depois de uma temporada, voltou em 1980 e ficou TREZE anos. Em agosto de 1981 ganhou o primeiro Troféu Ramón de Carranza, batendo o Sevilha de Miguel Muñoz por 1 a 0 com gol de Dieguito, num time com Bocoya, Juan José, Hugo Vaca, Dos Santos, Amarillo, Luque, Linares, Pepe Mejías e Mané.
O melhor jogador da história é salvadorenho. MÁGICO GONZÁLEZ jogou aqui nos anos 1980 e no começo dos 1990, e a Wikipédia em inglês diz que ele é amplamente reconhecido como o melhor que já vestiu esta camisa, os 43 gols dele em 161 partidas empatam no topo da lista histórica. São dezesseis temporadas de primeira divisão, um título de segunda em 2004-05 e uma semifinal de Copa do Rei em 1989-90.