Al Castello" è il nome con cui questo hotel e ristorante è sempre stato nominato dalla popolazione locale. Apparentemente un castello medievale, è in realtà una storica villa padronale, costruita tra il sedicesimo e il diciassettesimo secolo, in origine di proprietà della famiglia Caccia, nominata feudataria di Sillavengo dal duca di Milano, Gian Galeazzo Sforza, nel 1483. Dopo il diciannovesimo secolo, la villa padronale è passata nelle mani della famiglia Gorini.
Al Castello ha visto nel corso dei secoli diverse ristrutturazioni, fino a quella del diciannovesimo, con la creazione di una facciata lungo il fronte della villa nello stile dei bastioni di un castello, completo di torrette centrali e grandi principali porte d'ingresso con torri angolari.
Oggi la struttura conserva la meravigliosa facciata scenografica, i saloni affrescati che ritraggono le vicende della famiglia Caccia e gli stemmi tipici del casato.