La seigneurie de Flesselles est attestée à partir du 12e siècle. Au début du 14e siècle, elle appartenait à Guillaume de Saveuse qui aurait fait construire un château à plusieurs tours, dont l'une est conservée. Au 17e siècle, un nouveau château fut bâti pour la famille Brégy de Flesselles : de cet édifice demeure l'actuelle salle de réception (ancien commun en briques et pierres). En 1744 le château fut vendu à Alexandre Nicolas de Bray, qui fit construire en 1747 le corps de logis actuel et le pavillon à étage-carré. La liaison entre le corps de logis et le pavillon est assurée par un long bâtiment à portail néo-classique, qui aurait été édifié vers 1780 par l'architecte Rousseau. Au 19e siècle, Charles de Chévigné agrandit le parc, y planta des espèces rares et fit bâtir un petit chalet de jardinier. Il remania aussi l'aménagement intérieur du château : établissement d'un fumoir près du portail d'entrée, réfection de l'escalier et des boiseries du corps de logis. A la suite de la vente du domaine en 1976, l'ancien parc a été converti en lotissement, seuls des vestiges du mur de clôture indiquent encore son emprise. Le château a été en partie restauré par son propriétaire actuel en 1985 : aménagement de salles de réception près de la tour.