Brève histoire du family office : de ses origines à nos jours

Avant que ce terme n'existe

L'idée d'une structure professionnelle dédiée à la gestion des affaires d'une famille fortunée précède de plusieurs siècles l'expression « family office ». Les intendants des domaines aristocratiques européens, les « factors » chargés de gérer le patrimoine foncier écossais et les agents employés par les familles de marchands coloniaux exerçaient tous des fonctions manifestement similaires : consolider les comptes, régler les factures, gérer les litiges juridiques et préserver le capital au fil des générations. Ce qui faisait défaut à ces dispositifs, c'était la spécialisation professionnelle et la pérennité institutionnelle. Il s'agissait d'extensions du foyer, et non d'entités indépendantes dotées de leur propre governance.

La transition vers ce que l'on peut qualifier de « moderne » a commencé aux États-Unis au cours des dernières décennies du XIXe siècle. L'Âge d'or a donné lieu à une concentration de richesses privées sans précédent dans l'histoire américaine et qui n'a guère d'équivalent dans le monde industrialisé. Trois familles, les Rockefeller, les Mellon et les Phipps, ont chacune mis en place des structures permettant de répondre au problème spécifique posé par leur fortune et, ce faisant, ont établi des modèles auxquels les praticiens se réfèrent encore aujourd'hui.

Le modèle Rockefeller : un contrôle centralisé

John D. Rockefeller Sr. a créé en 1882 ce qui est généralement considéré comme le premier véritable single family office américain, l'année où la Standard Oil of Ohio a été réorganisée en Trust. Ce bureau, connu en interne sous le nom de « Room 1400 » d'après son adresse dans le Standard Oil Building à New York, remplissait initialement une fonction administrative : gérer les distributions provenant du Trust, assurer le suivi des dons caritatifs et tenir la comptabilité d'un vaste ensemble de placements personnels. Au fil du temps, il s'est transformé en une véritable entité d'investissement et d'Estate Planning, gérant des terrains, des obligations ferroviaires, puis un portefeuille diversifié de titres. Cette structure a survécu à la dissolution de la Standard Oil en 1911 et est finalement devenue la « Rockefeller Family and Associates », qui a géré à la fois le capital familial et des capitaux extérieurs jusqu'à la fin du XXe siècle. La principale leçon du modèle Rockefeller réside dans la continuité institutionnelle : le bureau a survécu à la source initiale de la fortune, au retrait opérationnel de la famille et à de multiples transitions générationnelles.

Les bureaux Mellon et Phipps : des problèmes différents, des solutions similaires

Thomas Mellon et ses fils Andrew et Richard ont mis en place leur structure de family office par le biais de T. Mellon and Sons, une banque privée qui s'est progressivement transformée en une entité dédiée au wealth management, à mesure que les participations industrielles de la famille, dans l'aluminium, l'acier et le pétrole, devenaient trop complexes pour s'inscrire dans le cadre d'une relation bancaire classique. Le cabinet Mellon se distinguait par l'intégration des fonctions bancaires, de Trust et d'investissement au sein d'une seule structure de governance, un modèle qui anticipait le family office intégré d'aujourd'hui.

Henry Phipps Jr., qui avait cédé sa participation dans Carnegie Steel à J.P. Morgan en 1901 pour environ $50M (soit l'équivalent d'environ $1,8B en 2024), s'est retrouvé confronté au problème typique d'un événement de liquidité : une position de trésorerie soudaine, importante et concentrée, nécessitant une diversification rapide. Il a fondé Bessemer Trust pour gérer le produit de cette cession. L'approche du cabinet en matière de diversification, une allocation systématique entre classes d'actifs privilégiant la préservation du capital, est devenue une référence pour les wealth managements post-sortie. Bessemer s'est ensuite ouvert à une clientèle externe et est devenu l'un des premiers multi family offices aux États-Unis, une décision qui illustre en soi la pression économique poussant les single family offices vers des structures partagées.

Le XXe siècle : invisible et non réglementé

Pendant la majeure partie du XXe siècle, les family offices ont opéré dans un vide réglementaire qui était, pour l'essentiel, délibéré. Aux États-Unis, l'Investment Advisers Act de 1940 exemptait les single family offices des obligations d'enregistrement, une dérogation qui reflétait à la fois l'influence politique des familles fortunées et la distinction conceptuelle réelle entre la gestion de son propre patrimoine et l'exercice d'une fonction fiduciaire auprès du public. Les structures européennes, qu'elles prennent la forme de holdings suisses, de fondations liechtensteinoises ou de « Stichtings » néerlandaises, bénéficiaient de la même manière d'obligations de divulgation minimales et d'une indifférence réglementaire générale à l'égard du wealth management privé.

Ce manque de transparence a eu des conséquences concrètes. L'étude académique du family office était limitée par l'absence de données. Les comparaisons étaient pratiquement impossibles. Les normes de rémunération, les pratiques de governance et les stratégies d'investissement n'étaient partagées, le cas échéant, que par le biais de réseaux informels de confiance. Les connaissances accumulées au sein de ces bureaux relevaient du secret d'entreprise par défaut, et non par choix.

Le family office du XXe siècle s'est autant caractérisé par ce qu'il a soustrait au regard du public que par ce qu'il a construit dans l'ombre. Il est désormais structurellement impossible de maintenir cette architecture de l'information.

Cette période a également vu l'institutionnalisation progressive du modèle multi family office. À mesure que des sociétés de Trust professionnelles, des banques privées, puis des plateformes de multi family office spécialisées ont vu le jour, les familles dont la taille était inférieure au seuil de rentabilité d'un single family office ont pu accéder à des services comparables à un coût partagé. Les estimations du secteur, qu'il convient de considérer avec prudence compte tenu de son opacité, suggèrent qu'à la fin des années 1990, il existait plusieurs centaines de single family offices à l'échelle mondiale, concentrés en Amérique du Nord, en Suisse et au Royaume-Uni.

La rupture réglementaire : FATCA, CRS et BEPS

La crise financière de 2008 et ses répercussions politiques ont mis fin à la trêve réglementaire. Les États-Unis ont adopté en 2010 le Foreign Account Tax Compliance Act (FATCA), qui oblige les institutions financières étrangères à déclarer les comptes détenus par des personnes américaines, sous peine d'une retenue à la source de 30 % sur les paiements provenant des États-Unis. FATCA a une portée extraterritoriale et s'est avéré largement efficace dans sa mise en œuvre : il a contraint les structures offshore à se rendre visibles ou à devenir inaccessibles aux bénéficiaires américains.

La norme commune de déclaration de l'OCDE (CRS), entrée en vigueur en 2017 pour les premiers signataires et adoptée depuis par plus de 100 juridictions, a étendu à l'échelle mondiale le principe de l'échange automatique d'informations. Le CRS impose aux institutions financières, y compris à de nombreuses structures par l'intermédiaire desquelles opèrent les family offices, d'identifier la résidence fiscale des titulaires de comptes et d'en rendre compte chaque année à l'administration fiscale de leur juridiction d'origine. Pour les familles disposant de structures multijuridictionnelles, le CRS a créé une charge de compliance et une asymétrie d'information : les autorités fiscales reçoivent désormais des données que les familles considéraient auparavant comme privées.

Le Pilier 2 du BEPS, le cadre de l'OCDE relatif à l'impôt minimum mondial, adopté en 2021 et en cours de transposition dans les États membres de l'UE et d'autres juridictions jusqu'en 2024 et 2025, s'applique principalement aux entreprises multinationales dont le chiffre d'affaires annuel dépasse 750 millions d'euros. La plupart des family offices se situent directement en dessous de ce seuil, mais ce n'est souvent pas le cas des sociétés d'exploitation détenues par des familles UHNW. Pour les fondateurs-propriétaires dont le family office est essentiellement une société holding gérant une activité opérationnelle, le Pilier 2 impose un taux d'imposition minimum effectif de 15 % dans toute juridiction, éliminant ainsi les formes les plus agressives d'érosion de la base d'imposition. Le régime de déclaration obligatoire DAC6 de l'UE ajoute une couche supplémentaire, en exigeant des intermédiaires qu'ils signalent certains montages fiscaux transfrontaliers dans les 30 jours suivant leur mise en œuvre.

La structure de coûts et la réponse du multi family office

Faire fonctionner un single family office crédible requiert une infrastructure minimale : un directeur des investissements, un directeur financier, des conseillers fiscaux et juridiques, ainsi que du personnel administratif. Selon la juridiction et les niveaux hiérarchiques, une équipe réduite mais compétente coûte entre $2M et $5M par an en rémunération totale et frais d'exploitation. Sur une base d'actifs de $300M, cela représente 67 à 167 points de base de coûts annuels avant toute commission de gestion, une économie très défavorable. Sur une base de $750M, ces mêmes coûts fixes représentent entre 27 et 67 points de base, ce qui reste significatif mais justifiable au regard de la governance, du contrôle et de la confidentialité qu'offre un single family office.

Le seuil pratique de viabilité d'un single family office a historiquement été estimé entre $500M et $1B d'actifs investissables. En dessous de cette fourchette, un multi family office, qui répartit les coûts d'infrastructure entre plusieurs clients tout en proposant une gamme de services comparable, offre généralement un meilleur rapport qualité-prix. Au-delà, la prime de contrôle justifie le coût d'une structure dédiée : capacité à définir la politique d'investissement, à gérer les conflits d'intérêts et à intégrer l'Estate Planning et la planification de la société d'exploitation sans tenir compte des intérêts d'autres clients.

Le multi family office n'est pas un compromis. Il s'agit d'une réponse économiquement rationnelle à la structure de coûts fixes du wealth management professionnel, et pour la plupart des familles, c'est la solution la plus adaptée.

Trois forces qui redéfinissent le modèle

Pression juridictionnelle

La combinaison de FATCA, du CRS et de la directive DAC6 a rendu l'arbitrage juridictionnel nettement plus difficile et plus coûteux à gérer. Les familles qui maintenaient par le passé des structures dans plusieurs juridictions à faible fiscalité font désormais face à l'échange automatique d'informations, à des exigences de substance et à des obligations de déclaration qui engendrent de réels coûts de compliance. La réponse des family offices avertis a été la consolidation : moins d'entités juridiques, des structures de holding plus lisibles et une préférence pour les juridictions dotées de réseaux de conventions fiscales stables et d'une véritable infrastructure réglementaire. Singapour, les Émirats arabes unis (notamment l'Abu Dhabi Global Market et le Dubai International Financial Centre) et l'Irlande ont chacun attiré des capitaux de family office, en partie grâce à des cadres réglementaires clairs, et non uniquement en raison d'une opacité fiscale.

La technologie et la réduction de la couche administrative

Le reporting consolidé, le rapprochement automatisé et la gestion documentaire ont considérablement réduit les effectifs administratifs nécessaires au fonctionnement d'un family office. Des fonctions qui nécessitaient deux ou trois collaborateurs dédiés il y a dix ans peuvent désormais être prises en charge par une seule personne grâce à des flux de travail spécialement conçus à cet effet. Cette rationalisation n'a pas entraîné de réduction des effectifs globaux du secteur : la demande en matière de conseil, de governance et de surveillance des investissements s'est accrue. Elle a en revanche modifié la composition des équipes de family office, en privilégiant les postes à plus forte rémunération et nécessitant davantage de jugement, ce qui a entraîné une hausse de la rémunération moyenne par employé tout en réduisant le nombre de postes purement administratifs. Pour les familles qui créent de nouveaux bureaux, cela signifie que les effectifs doivent être planifiés en fonction de la capacité de prise de décision, et non du volume de tâches administratives.

Le défi du fondateur-propriétaire

La catégorie de clients de family office qui se distingue le plus sur le plan structurel aujourd'hui est celle des fondateurs qui conservent une participation majoritaire dans une société en activité. Ce profil diffère du modèle Phipps (liquidité post-sortie) et du modèle Rockefeller (diversification post-cession) sur un point essentiel : le patrimoine n'a pas été monétisé et pourrait ne pas l'être avant des années, voire des décennies. Le family office doit donc gérer l'interaction entre un actif d'exploitation illiquide, concentré et potentiellement endetté, d'une part, et un portefeuille d'investissement classique, d'autre part, tout en répondant aux besoins de liquidité personnels, aux objectifs d'Estate Planning et aux objectifs philanthropiques.

Cela requiert une expertise différente de celle d'un bureau d'investissement classique. La planification fiscale liée aux carried interest, le recours à des sociétés en commandite familiales, les structures de prêts aux actionnaires et la politique de dividendes exigent tous des conseillers possédant une expérience des sociétés d'exploitation, et pas seulement une connaissance des marchés de capitaux. La complexité de la governance est également plus élevée : le family office doit souvent naviguer entre la governance familiale et la governance d'entreprise d'une manière à laquelle les bureaux d'investissement purs ne sont jamais confrontés. Les conseils d'administration, les pactes d'actionnaires et les structures d'incitation de la direction au sein de la société d'exploitation relèvent en pratique du family office, même lorsqu'ils ressortissent formellement aux affaires juridiques et corporatives.

Ce qui perdure

Le family office a survécu à la transformation industrielle, aux bouleversements réglementaires, à deux guerres mondiales et à de multiples crises financières, car le problème fondamental auquel il s'attaque, préserver et transmettre le patrimoine privé d'une génération à l'autre tout en gérant sa complexité, ne change pas sur le fond, même s'il évolue dans la forme. Ce que les cabinets Rockefeller, Mellon et Phipps avaient compris, et que les recherches sur la transmission multigénérationnelle du patrimoine ne cessent de confirmer, c'est que l'échec de la governance détruit davantage de patrimoine familial que l'échec des investissements. Une déclaration de politique d'investissement documentée, une Family Constitution écrite énonçant clairement les valeurs et les droits de décision, ainsi qu'un plan de succession portant à la fois sur la direction du cabinet et sur l'avenir des actifs d'exploitation ne sont pas des formalités bureaucratiques. Ce sont les conditions structurelles qui permettent à la fortune de survivre au passage de la génération du fondateur à la deuxième, puis de la deuxième à la troisième. L'histoire du family office est, en grande partie, l'histoire des familles qui l'ont compris suffisamment tôt, et de celles qui ne l'ont pas compris.