A lo largo del tiempo, tres líneas de la familia Eltz construyeron sus aposentos en el conjunto del castillo: Los Rübenach en 1472, los Rodendorf en 1540 y los Kempenich en 1615. Actualmente, el castillo pertenece al Conde Karl, de la línea del León de Oro.