El Palacio del Duca da justo enfrente de la Rocca Roveresca. Encargado por Guidubaldo II della Rovere a mediados del siglo XVI sobre un proyecto de Gerolamo Genga, fue ampliado en las décadas inmediatamente posteriores por su hijo y heredero Francesco Maria II, el último representante de la dinastía, quien modificó la simetría de la fachada. , haciendo que el portal de entrada se coloque entonces a la izquierda. El palacio no fue diseñado para albergar al duque de forma permanente, sino como residencia representativa de la corte y de sus ilustres invitados, que podían admirar desde las ventanas los desfiles militares que se desarrollaban en la plaza.

En el interior, un espléndido artesonado atribuido a Taddeo Zuccari embellece el Salón del Trono. Los cuarenta y nueve cofres fueron probablemente realizados entre 1553 y 1555 y recuerdan ambientes alegres, alegres y festivos. Pero también podemos ver ironía y sátira hacia el poder político y cultural: el maestro Zuccari pinta temas carnavalescos mostrando un mundo imaginario al revés, donde los niños, representados por putti, gobiernan sobre los adultos, y los pobres sobre los ricos. También en el Salón del Trono también es visible un árbol genealógico en papel de la familia Della Rovere.

El edificio da a la plaza del mismo nombre, cuyo nombre se refiere en cambio a Giovanni Della Rovere. La plaza tiene características únicas para la época del Renacimiento: ningún edificio religioso la domina y la llamada Fuente del Anatre (o de los Leones) se encuentra en una posición descentralizada, lo que confirma el uso militar de este espacio.