Cet édifice s'insérait dans l'enceinte de l'abbaye et constituait le pavillon d'entrée de l'abbaye, démolie lors de la Révolution française. Il abrite les salles où l'abbé exerçait son pouvoir temporel et seigneurial. Il est composé de deux pavillons octogonaux, adjoints tous deux à l'arrière d'une pièce rectangulaire et reliés par un passage couvert. Les pavillons sont élevés sur deux niveaux ; un étage de soubassement éclairé de simples meurtrières et un entresol percé d'ouvertures rectangulaires. Les deux niveaux sont en grès, en moellons pour le soubassement, en pièces de grès plus larges et bien taillées pour l'entresol, un appareil en bossage pour les encadrements de baies, et des bandeaux décorés d'entrelacs séparant les différents niveaux. L'étage noble, évoquant la forme du tambour, est en pierre calcaire de taille. L'élévation de ce niveau est ordonnancée par l'alternance des grandes baies et de médaillons situés aux angles de l'octogone. Chacun des pavillons est couvert d'un toit à bulbe polygonal et une toiture à longs pans relie les différentes toitures. Le passage couvert, au centre de ce niveau de soubassement, rappelle le châtelet ; les colonnes baguées sur gros socle à bossage et entablement évoquent les tours du château, au-dessus, le portail coiffé d'une baie avec balcon, surmonté d'une niche évoque la herse. Au second plan, au même niveau que la toiture des pavillons, une tour coiffée d'un toit en pavillon surmonté d'un lanternon évoque un beffroi. Un décor exubérant et baroque couvre les façades. Le pavillon de droite conserve depuis l'origine le décor de huit toiles réalisées par Louis Watteau. Elles sont encastrées dans les écoinçons de la voûte de la salle de l'étage où l'on rendait la justice. Les historiens du XIXe siècle et XXe siècle ont étudié ce cycle. Citons l'analyse la plus récente, de Gaëtane Maës : une scène de charité, trois scènes de jugement, des scènes allégoriques liées aux activités économiques de la ville de Saint-Amand-les-Eaux, une représentation symbolique du pouvoir de l'abbé.