Construit au 11e siècle, il devient au 14e siècle la résidence des évêques de Dol. Devenu vétuste le château est remplacé par un palais épiscopal en 1754 et transformé en collège au 19e siècle. Depuis 1999, il abrite le musée "Cathédraloscope" consacré aux bâtisseurs de cathédrales ainsi que le Bureau d'Information Touristique.