Zámek Kozel nechal postavit jako lovecké reprezentační sídlo Jan Votěch Černín z Chudenic (1746 – 1816), nejvyšší lovčí Království českého. Jeho název je patrně reminiscencí na pohanské obyvatele oblasti, kteří zde prý před dávnými věky obětovali bohům kozla. Zámek vznikl ve dvou fázích: hlavní budova vznikla v letech 1784 – 1789 podle projektu pražského stavitele Václava Haberditze, zatímco kapli, jízdárnu, lokajnu a konírnu postavil v polovině devadesátých let 18. století rovněž pražský architekt Ignác Jan Palliardi. Po smrti bezdětného zakladatele přešel zámek roku 1816 do majetku Valdštejnů. Ti jej drželi až do roku 1945, kdy byl zestátněn; majetkem státu zůstal zámek Kozel dodnes a je přístupný veřejnosti.