Il Castello di Tavolese risale alla prima metà del '200. "I più antichi abitatori di Tavolese, per quanto sappiamo, furono i Farinata degli Uberti "attenti a quel forte d'animo e d'ingegno" che seppe nel Secolo XIII "levar sua Patria dalla ruina" minacciata dai Ghibellini. "Ma fu'io sol' colà, dove sofferto "Fu per ciascun di torre via Fiorenza, "Colui che la difesi a viso aperto". Dai Farinata il castello di Tavolese passò in proprietà alla famiglia Dell'Asino che trasse cognome da Pietro detto Asino, fratello di Farinata e capitano di Manfredi Re di Napoli. Ne subentrò al possesso la illustre prosapia Canigiani, da cui ebbe la madre il Petrarca." (da "Memorie del Piviere di S.Pietro in Bossolo" di Luigi Biadi, Firenze 1848). Il castello poi passò ai nobili Signori Giugni succeduti all'eredità Canigiani ed ai Conti Capponi, ultimi eredi, che lo cedettero nel 1988 a Clemente Carlo Kaiser che con appassionato lavoro ha restituito al castello la sua antica austera bellezza.