Das Schloss setzt sich aus Bauteilen verschiedener Epochen zusammen. Zum ältesten Baubestand aus der Zeit um 1400 gehört die Durchfahrt des Obertorturms, der durch den Umbau Ende des 17. Jahrhunderts seinen wehrhaften Charakter verlor. Nördlich schließt sich der Renaissancebau des Kurpfälzischen Schlosses von 1537 an. Hier verbrachten Mitglieder der kurfürstlichen Familie wie Ottheinrich, Johann Wilhelm und seine Frau Anna Maria Luisa Medici sowie Elisabeth Auguste längere Zeit. Dann folgt der von der Familie Berckheim in der zweiten Hälfte des 19. Jahrhunderts umgebaute Schlossteil mit dem 1868 errichteten neugotischen Turm. Der südlich des Obertors gelegene barocke Schlossteil wurde 1725 durch die Familie Ulner von Dieburg errichtet. Hier befindet sich auch das Schlosspark Restaurant.
Der Schlosspark ist eine gepflegte, großzügige Parklandschaft mit wertvollem Baumbestand, einem historischen Mausoleum und einer wunderschönen Teichanlage. Beeindruckend sind riesengroße Rhododendren– und Eibenbüsche sowie die größte Libanonzeder Deutschlands. Dank des milden Klimas an der Bergstraße gedeihen hier allerlei Pflanzen, die ursprünglich am Mittelmeer beheimatet waren. Auch der Heilpflanzengarten befindet sich innerhalb des Schlossparks.
