In località Poia, all'ingresso occidentale di
Ponte di Legno, si trova il Castello di Castelpoggio. Nel 1922 il conte Giuseppe Zanchi De Zan acquista il poggio e costruisce l'attuale castello. Nel secondo dopoguerra nel maniero sono stati ricavati 21 miniappartamenti: 12 nel castello, 7 nelle stalle, 1 nella casetta del maggiordomo ed 1 nella cappella. Il castello, sito a 1272 m sul livello del mare, ha una cinta muraria lunga 580 m e sei accessi. Famoso anche per essere ospite di esponenti politici di orientamento leghista.