Этот замок 10 века был построен семьей Бонакольси, ведущей семьей Мантуи до Гонзаги. Позже замок использовался семьями Гонзага и Скалигери. Слава замка также связана с историей Модены.
В 1311 году Франческо I Пико был назначен императором управлять городом Модена. Всего через год он был ненавидим обеими основными фракциями города (гвельфы и гибеллины) и был предан с помощью болонской армии. Ему удалось избежать засады и вернуться в Модена. С того дня легенда гласит, что он мстил своим врагам день за днём, одного за другим.
Из-за насильственной мести жители Модены попросили Ринальдо Бонакольси, правителя Мантуи, вмешаться. В конце концов, Бонакольси взял Франческо Пико и двух его сыновей, раздел их и привязал к ослам, что позволило людям бить и бить их камнями по дороге в Кастель д'Арио. Их заперли в главной башне, где они умерли от голода, потому что остались без еды и воды.
Во время раскопок главной башни в 1851 году были обнаружены семь скелетов, один из которых все еще находился на складах. Четыре трупа были идентифицированы как принадлежащие семье Бонакольси. Башню часто называют Torre della Fame, или «Башней голода», из-за ужасного заточения, для которого она использовалась.