Ce portail monumental provient de l'hôtel d'Hinnisdal, rue Cassette à Paris, dans le quartier Saint-Sulpice. Édifié au début du XVIIIᵉ siècle sur un terrain de 3000 m² entre cour et jardin, donnant à la fois sur la rue Cassette et sur la rue de Vaugirard, cet hôtel particulier est acquis en 1807 par Joachim comte d'Hinnisdal (1779-1814) pour 100 000 F auprès de Jean-Barthélemy Le Couteulx, comte de Canteleu (1746-1818). Banquier (fondateur et régent de la Banque de France de 1800 à 1804), industriel impliqué dans la traite négrière et homme politique (député aux États généraux en 1789, président du Conseil des Anciens en 1796, sénateur conservateur de 1799 à 1814, puis pair de France jusqu'en 1818), Le Couteulx de Canteleu traverse alors de graves difficultés financières qui motivent la cession.

Le comte d'Hinnisdal s'y installe avec son épouse, Mélanie de Villeneuve-Tourrettes (1778-1848), et leurs trois enfants. Le couple entreprend rapidement d'importants travaux de rénovation et de décoration, confiés à Pierre-Claude Convers (1735-1820). Ce dernier avait été l'architecte de la princesse de Conti sous Louis XVI et habitait rue Cassette.

À la mort de Joachim d’Hinnisdal en 1814, sa veuve demeure jusqu'à sa propre mort en 1848 dans l’hôtel avec leur dernière fille, Roseline (1810-1878), restée célibataire, qui y décède en 1878. Dès 1877, Roseline d'Hinnisdal a légué la demeure à sa nièce Marie-Thérèse d’Hinnisdal, devenue comtesse de Lévis-Mirepoix (1844-1934). Cette dernière vend l'hôtel d'Hinnisdal en 1905 à l’Institut catholique de Paris, déjà établi dans l’ancien couvent voisin des Carmes. Cette cession s’explique par la situation nouvelle de la comtesse. Épouse de Gaston de Lévis-Mirepoix, elle appartient désormais à une famille qui possède rue de Lille l’ancien hôtel Turgot, hérité des Crillon. En 1895, son mari y fait élever par l’architecte Louis Parent un vaste immeuble de cinq étages à l’emplacement des anciens communs. Cette résidence moderne et confortable rendait ainsi superflu l’hôtel hérité de la rue Cassette, demeure du XVIIIᵉ siècle sans doute moins adaptée aux exigences du temps. Il est vendu en 1891 à l'Institut catholique de Paris via la société civile immobilière de la rue Cassette.

Dès la cession de l'hôtel à cette société civile immobilière par acte du 1er avril 1891, Marie-Thérèse de Lévis-Mirepoix avait pris soin de se réserver le portail, avec stipulation qu'il ne pourrait être enlevé avant quinze ans, précaution prise par l'Institut qui envisageait sérieusement de démolir en partie l'hôtel et de faire reconstruire à front de rue. Une tentative d'enlèvement anticipé, diligentée par son mari le marquis Gaston de Lévis-Mirepoix en 1896, se heurte au refus du conseil d'administration de la société, qui réclame une indemnité compensant le coût d'une porte de remplacement et une garantie contre les recours des quatre locataires de l'hôtel particulier. Le portail n'est donc vraisemblablement démonté qu'aux alentours de 1906, à l'expiration de la clause, dans le cadre des travaux d'agrandissement de l'Institut catholique, avant d'être transporté et remonté dans le parc du château de Tilloloy.

Ce portail est remonté dans une contre-allée de l'avenue (face au porche central des communs) comme un vestige transplanté donnant accès au parc du château depuis la maison du régisseur.

Cette translation monumentale s'inscrit dans un mouvement de goût pour le pastiche et la reconstitution patrimoniale typique de la Belle Époque. Les grandes familles fortunées acquéraient alors fréquemment des éléments architecturaux anciens pour orner leurs propriétés. C'est dans ce contexte, doublé d'une intention mémorielle, que le parc du château de Tilloloy, alors propriété d'Henri d'Hinnisdal (1841-1922) - frère de Marie-Thérèse -, a ainsi été enrichi de cette fabrique de jardin improvisée, créant un élément de surprise romantique dans le paysage.

À peine remonté, le portail subit les affres de la Première Guerre mondiale et sort très éprouvé du conflit.

La tradition familiale ajoute une note plus fragile à cette histoire patrimoniale : elle veut que la vente soit financée par des emprunts russes — ou que son produit y soit placé. Or la Révolution de 1917 entraîne la répudiation de ces dettes par le nouveau pouvoir. Les titres ne sont pas remboursés : l’investissement se dissout dans l’histoire, perte sèche qui contraste avec la survie bien tangible du portail sauvé.