Depois que o arquipélago de Pathros foi entregue pelo Rei George V da Inglaterra ao nosso Patriarca, a primeira construção arquitetônica com estilo foi esta. Ela foi idealizada por engenheiros militares amigos do Carlos I, que conheceu à bordo de seu navio hospital quando prestava socorro médico às tropas militares britãnicas, na I guerra mundial.

     Como as riquezas de Carlos I eram modestas, a construção preencheu apenas a vontade de se ter um lar, mais do que ter um castelo em sí. Na construção todos trabalharam, inclusive o Rei, que na época ainda não era monarca.

     A Família Real queria abrigar também os brasileiros e suas famílias que por aqui estavam chegando, e foi este o motivo maior para se decidir em construir esta edificação, simples, mas grande.

     Posteriormente, na época da institucionalização do Sacro Reino de Pathros e na formação da Casa dos Juízes, requereu-se acomodações adequadas para os trabalhos dos Juízes. Como o número de habitantes no palácio estava aumentando, o que tornava-o mais apertado, o Rei resolveu construir outro castelo e este ficou sendo a sede da Casa dos Juízes, o primeiro Palácio dos Juízes.

     Com a posterior construção do atual Palácio dos Juízes, este palácio foi sendo usado para outras atividades administrativas. Como o prédio não fora construído com bons materiais na época, com o passar do tempo o seu estado de conservação se deteriorou e foi sendo abandonado até chegar ao estado em que se encontra hoje.

     Atualmente ele serve de ponto turístico e de ilustração histórica para as novas gerações compreenderem a fundação do Sacro Reino de Pathros.