Castel-Branco é uma variante de Castelo-Branco, que em documentos antigos também surge com a grafia "Castell Branco".
Segundo o Armorial Lusitano, publicado pelas Edições Zairol, não há informação segura sobre esta família, supondo alguns que está relacionada com a família Castelo-Branco de Aragão. O primeiro que deve ter usado este apelido foi Martim de Castelo Branco, que viveu em Castelo Branco no tempo do rei D. Afonso III. As armas desta linhagem são de azul com um leão de ouro e vermelho e com outro leão igual ao do escudo no timbre (ou insígnia na parte superior).