Segundo alguns genealogistas, os Silvas descenderiam, em parte, dos reis de Leão, um antigo e poderoso reino que existia na Península Ibérica durante a idade média e em parte dos Silvios da Roma antiga, uma família lendária que estaria ligada aos reis de Alba-Longa e seriam descendentes do herói lendário Eneias.