"L'imperatore Federico I Barbarossa confermò con illustrissimo diploma questo castello, come feudo gentilizio, al possessore Uberto I de Olevano nell'anno 1164. Distrutto da Facino Cane nel 1404, Antonio de Olevano, discendente di Uberto I lo ricostruì nell'anno 1420. Devastato dalle incursioni dei Francesi durante la guerra subalpina nel 1557, Bartolomeo III de Olevano,(discendente) di Antonio da padre in figlio, lo restaurò nel 1560. Ridotto inabitabile dalla guerra, dal tempo e dall'incuria, nel 1758 il marchese Gerolamo III de Olevano, padre di Uberto e Saverio, (discendente) da padre in figlio di Bartolomeo II, lo restaurò con semplicità e non con lusso".
Al complesso si accede da via Cavour. "E' probabile che in corrispondenza dell'attuale cancello di entrata al maniero sorgesse un tempo una spece di rivellino con ponte levatoio"¹. La torre di sinistra non si eleva sopra il tetto e presenta una finestra centrale riccamente modanata in cotto; la torre di destra, alta 23 metri, a base scarpata, è coronata da una merlatura ghibellina e decorata da un fregio a denti di sega. Presenta inoltre due finestre di disegno trecentesco ornate da ricchi rilievi in cotto: una monofora, sul lato sinistro, contenente un affresco molto deteriorato, ed una bifora, sul fronte, dotata di davanzale ad archetti pensili. L'ingresso avviene da un protiro ad una colonnina e da un portone carraio posto a destra della torre principale. La facciata volta a meridione, risalente al restauro settecentesco, non si discosta da quelle di altre ville della stessa epoca con linee tranquille ed armoniose atte a ricercare uno squisito connubio con il parco. Dal giardino si accede ai vani interni per una scala di pochi gradini a doppia rampa. Le finestre sono decorate con cornici intonacate, con serraglietta sommitale. Il giardino, ispirato al romanticismo ottocentesco, ofre alcuni richiami architettonici costituiti da due ponticelli, di cui uno in ferro battuto, da una vasca di ninfee con un putto in pietra e da una splendida edicoletta circolare a colonnine, di gusto classico, al cui interno è collocata la statua simbolica dell'estate. Annessa al castello, sulla destra del portone carraio, esiste ancora l'antica cappella dedicata a San Salvatore. L'attuale costruzione fu sistemata nel 1718 dal marchese Gerolamo Olevano. Un'iscrizione ricorda questo restauro: