Inscrit au titre des Monuments Historiques, les origines du beffroi de Saint-Fargeau remontent au XVe siècle. Aussi appelé "tour de l’horloge", il se distingue par ses quatre niveaux, ses cadrans d’horloge et son passé fascinant. À l’origine, il s’agissait d’une porte fortifiée faisant partie de la première enceinte du château, équipée d’un pont-levis pour les attelages et d’une passerelle pour les piétons. Les traces de ces mécanismes sont encore visibles aujourd’hui.
Au XVIIe siècle, l’édifice a été transformé avec l’ajout d’une toiture, prenant ainsi la fonction de beffroi. Ce bâtiment, qui a servit de prison, abrite encore aujourd'hui les cachots dans lesquels étaient retenus les prisonniers.