Family office : raisons valables et écueils à éviter

Anatomie d'une décision de family office

Chaque année, plusieurs centaines de familles dans le monde franchissent le seuil informel à partir duquel leurs conseillers en gestion de patrimoine commencent à recommander la création d'un family office dédié. La décision est rarement dictée par un facteur unique. Elle émerge le plus souvent d'une accumulation de frustrations : un reporting fragmenté entre huit dépositaires, un événement de liquidité qui a mis en lumière l'absence de stratégie fiscale coordonnée, ou une transmission intergénérationnelle qui a révélé le manque de philosophie d'investissement commune. Selon le rapport UBS Global Family Office 2023, le single-family office médian gère 1,7 milliard de dollars d'actifs, même si des structures opérationnelles existent à des seuils nettement inférieurs. La question n'est pas de savoir si un family office est prestigieux ou utile dans l'absolu. Elle est de savoir si les bénéfices spécifiques justifient les coûts spécifiques pour une famille spécifique — et si cette famille est opérationnellement et culturellement prête à diriger ce qui constitue, en substance, une entité de services financiers réglementée.

Raisons légitimes de créer un family office

La gouvernance au service des générations

L'argument le plus solide en faveur d'un family office n'est pas le rendement des investissements — c'est l'architecture de gouvernance. Les familles qui ont préservé et fait fructifier leur patrimoine sur trois générations ou plus partagent systématiquement une caractéristique : elles ont séparé la gestion des relations familiales de la gestion des actifs familiaux. Un family office crée le cadre institutionnel pour accomplir cela de manière systématique. Il offre un espace pour un comité d'investissement familial, un mécanisme pour intégrer les membres des troisième et quatrième générations dans les processus de décision financière, et une structure pour faire respecter une politique d'investissement auprès d'un groupe de bénéficiaires qui peut être divers et parfois en désaccord. L'exemple canonique reste la famille Rockefeller et son recours aux structures de gouvernance formelles dès le début du XXe siècle, mais ce schéma se retrouve aussi bien au sein de dynasties familiales néerlandaises, singapouriennes que du Golfe. En l'absence de structure formelle, la gouvernance reste informelle, tributaire des personnalités et fragile — elle survit à la génération fondatrice, mais lui survit rarement.

L'optimisation fiscale à grande échelle

Au-delà d'un certain seuil d'actifs, le potentiel d'optimisation fiscale d'un family office est mesurable et significatif. Une structure familiale consolidée peut mettre en œuvre une gestion fiscale par compensation des pertes (tax-loss harvesting) sur l'ensemble du portefeuille plutôt que sur des comptes individuels, coordonner les véhicules de philanthropie — fondations privées reconnues d'utilité publique ou fonds de dotation — avec les événements générateurs de plus-values, et piloter le calendrier de reconnaissance des revenus selon la situation fiscale de chaque membre de la famille. Les familles avec des membres dans plusieurs pays font face à une complexité particulière : obligations déclaratives FATCA pour les personnes liées aux États-Unis, échange automatique de renseignements CRS dans les 110 juridictions signataires, et règles du Pilier Deux de l'OCDE affectant toute société opérationnelle détenue par la famille dont le chiffre d'affaires dépasse 750 M EUR. Un family office correctement doté — avec au moins un conseiller fiscal qualifié et un accès à une expertise externe en prix de transfert — peut gérer cette complexité de manière coordonnée, ce qu'une banque privée de réseau est structurellement incapable de faire. McKinsey & Company estimait en 2022 que les familles disposant de 500 M USD ou plus en actifs économisent entre 80 et 150 points de base par an grâce à une gestion fiscale intégrée par rapport à une gestion externe fragmentée, même si ce chiffre varie sensiblement selon les juridictions et la composition des actifs.

Planification successorale et architecture patrimoniale

Le family office est le lieu naturel pour piloter le processus de planification successorale. Il centralise la documentation : testaments, actes de fiducie et pactes d'actionnaires, pactes Dutreil le cas échéant, lettres de souhaits et charte familiale si elle existe. Il coordonne les conseils : avocats spécialisés en droit successoral, conseils fiscaux, trustees et — si nécessaire — avocats réglementaires pour les structures relevant de la directive AIFM en Europe, ou de la réglementation de la FINMA en Suisse. Il préserve surtout la mémoire institutionnelle. Lorsque le patriarche ou la matriarche fondateur disparaît, le family office ne disparaît pas avec lui. La politique d'investissement subsiste. Le registre des actifs subsiste. Les relations avec les trustees subsistent. Pour les familles dont le patrimoine comprend des actifs illiquides — entreprises opérationnelles, portefeuilles immobiliers, co-investissements en private equity —, cette continuité n'est pas simplement commode. C'est la différence entre une transmission ordonnée et une cession forcée dans l'urgence.

Supervision consolidée de structures d'actifs complexes

Les familles d'une certaine envergure détiennent rarement des portefeuilles simples. Elles détiennent des participations minoritaires dans des sociétés non cotées, de l'immobilier direct dans plusieurs pays, des intérêts en carried interest dans des fonds de private equity, des collections d'art, et dans certains cas des aéronefs ou des yachts ayant leurs propres exigences réglementaires et assurantielles. Gérer ces actifs par l'intermédiaire d'une banque privée de réseau est structurellement insuffisant : les systèmes de la banque sont conçus pour les titres liquides, non pour suivre une clause d'earn-out sur une cession d'entreprise ou un passif fiscal différé sur un transfert immobilier transfrontalier. Un family office doté d'une infrastructure de reporting dédiée — construite en interne ou externalisée auprès d'un administrateur de fonds — peut produire un véritable bilan consolidé, libellé dans une devise de reporting unique et mis à jour avec une fréquence qui soutient réellement la prise de décision. Il ne s'agit pas d'une amélioration marginale. Pour les familles disposant de dix classes d'actifs distinctes ou plus réparties dans trois juridictions ou davantage, c'est le fondement d'une gestion financière fonctionnelle.

L'argument en faveur d'un family office est le plus solide non pas lorsqu'une famille a accumulé de la richesse, mais lorsque la complexité de ce patrimoine a dépassé les capacités institutionnelles de ses conseillers existants.

Les écueils que les partisans évoquent rarement

Une structure de coûts sans indulgence

L'économie d'un single-family office repose sur une base de coûts fixes qui se dilue mal à des niveaux d'actifs modestes. Une structure crédible à Londres, Zurich, Singapour ou Paris requiert au minimum : un directeur général ou directeur de family office, un directeur financier ou contrôleur de gestion, un spécialiste fiscal, un analyste investissements et un appui administratif. Dans les grandes places financières, cette équipe représente entre 1,5 et 3 M CHF/EUR de masse salariale annuelle, avant même de comptabiliser les locaux, la technologie, les honoraires juridiques, l'audit externe et les coûts de compliance réglementaire. En intégrant ces postes, le coût annuel global d'un single-family office de taille intermédiaire s'établit typiquement entre 3 et 5 M CHF/EUR. À 150 M CHF/EUR d'actifs sous gestion, cela représente 200 à 330 points de base — un niveau que tout investisseur institutionnel jugerait proprement inacceptable. Le seuil de rentabilité, à partir duquel un family office commence à délivrer une valeur nette supérieure à un multi-family office ou à une banque privée bien sélectionnée, est généralement cité à 150-200 M CHF/EUR d'actifs investissables, et plus sérieusement à 250 M CHF/EUR ou au-delà, lorsqu'on intègre le coût d'opportunité complet du temps de management et de la complexité de gouvernance.

La dette de gouvernance s'accumule en silence

Le mode de défaillance le plus insidieux lors de la création d'un family office est ce que les praticiens appellent la « dette de gouvernance » : l'accumulation de questions de gouvernance non résolues, différées au moment de la création parce que la famille est optimiste, unie et portée par l'enthousiasme de la nouvelle structure. Que se passe-t-il lorsque deux branches familiales divergent sur l'appétit au risque du portefeuille d'investissement ? Qui détient l'autorité pour nommer et révoquer le directeur du family office ? Quelle est la politique de liquidité pour les membres qui ont besoin de distributions — et s'applique-t-elle de manière identique à toutes les branches ? Quels conflits d'intérêts doivent être déclarés, et à qui ? Ces questions sont inconfortables à trancher lorsque les relations sont chaleureuses. Elles deviennent franchement dangereuses lorsque les relations se refroidissent — ce qui, dans la plupart des familles multigénérationnelles, finit par arriver. Une charte familiale et une politique d'investissement, rédigées et ratifiées avant l'ouverture du family office, ne sont pas des formalités bureaucratiques. Elles sont le système d'exploitation sans lequel le matériel finira inévitablement par tomber en panne. Les familles qui font l'économie de ce travail en première année le paient généralement en honoraires d'avocats la septième année.

Le recrutement et la fidélisation des talents : un défi structurel

Les family offices sont en concurrence pour les talents avec des gérants d'actifs, des hedge funds et des fonds de private equity qui offrent des trajectoires de carrière plus lisibles, des réseaux professionnels plus larges et, dans bien des cas, des rémunérations variables plus attractives. Un professionnel de l'investissement expérimenté qui rejoint un family office accepte un mandat plus étroit, une équipe réduite et les dynamiques idiosyncrasiques du travail au service d'une seule famille fortunée. En contrepartie, il perçoit généralement une rémunération fixe supérieure au marché — le directeur des investissements d'un single-family office gérant 500 M CHF/EUR touche entre 350 000 et 600 000 CHF/EUR de salaire de base dans les grandes places financières — mais un potentiel de hausse limité par rapport à l'économie des fonds. Il en résulte un marché des talents qui favorise soit des candidats en fin de carrière, attachés à la stabilité plutôt qu'à la performance variable, soit des candidats en début de carrière manquant de l'expérience nécessaire pour prétendre à des fonctions dirigeantes ailleurs. Les familles découvrent souvent, parfois après des recrutements coûteux, que diriger un family office exige un profil de compétences très spécifique : expertise en investissement, intelligence des dynamiques familiales, maîtrise des enjeux réglementaires et maturité politique pour gérer plusieurs donneurs d'ordre aux intérêts parfois divergents. Cette combinaison est genuinement rare, et le coût du turnover — en termes de mémoire institutionnelle, de confiance familiale et d'honoraires de cabinet de chasse — est élevé.

Une exposition réglementaire croissante, non décroissante

De nombreuses familles créent un family office en présumant qu'il opérera sous le seuil réglementaire. Dans certaines juridictions et à certaines échelles, cela reste partiellement vrai : en Suisse, la FINMA n'assujettit pas les structures gérant exclusivement des actifs familiaux à une licence de gestionnaire de fortune au sens de la LEFin, et des exemptions comparables existent à Singapour dans le cadre réglementaire de la Monetary Authority of Singapore. Mais le périmètre se resserre. En Europe, les family offices gérant plus de 100 M EUR en investissements alternatifs sont soumis aux exigences d'enregistrement de la directive AIFM, dont la transposition est supervisée par l'AMF en France, la CSSF au Luxembourg ou la FINMA en Suisse selon le domicile de la structure. Les obligations déclaratives CRS et FATCA ne diminuent pas avec le type de structure retenu. Le Pilier Deux de l'OCDE, pleinement opérationnel dans l'Union européenne depuis 2024 en vertu de la directive du Conseil 2022/2523, s'applique à tout groupe opérationnel familial dépassant le seuil de chiffre d'affaires. Les familles qui créent un family office pour simplifier leur exposition réglementaire découvrent souvent, dans les deux ans qui suivent, qu'elles ont ajouté une nouvelle entité réglementée à une toile déjà complexe d'obligations déclaratives, sans réduire substantiellement la complexité sous-jacente.

Le multi-family office comme alternative rationnelle

Pour les familles dont les actifs sont inférieurs au seuil de 200 M CHF/EUR — et pour certaines familles bien au-delà — un multi-family office bien sélectionné délivre 60 à 80 % des avantages structurels d'un single-family office pour environ 20 à 30 % du coût. La mutualisation des charges couvre la recherche en investissement, la compliance fiscale, le reporting réglementaire et la comptabilité consolidée qui nécessiteraient autrement une équipe interne complète. Les bénéfices en matière de gouvernance sont plus limités : un multi-family office ne peut pas reproduire le travail constitutionnel sur mesure d'une structure dédiée, et la personnalisation des investissements se heurte à des contraintes pratiques lorsque plusieurs familles clientes partagent une stratégie sous-jacente. Mais pour les familles dont le besoin premier est un reporting consolidé, une supervision compétente des investissements et la gestion des obligations FATCA/CRS — plutôt qu'une architecture de gouvernance dynastique — le multi-family office est fréquemment la structure la plus rationnelle. Le choix entre les structures doit être guidé par une analyse coût-bénéfice rigoureuse, et non par l'attrait du prestige qu'un family office dédié confère.

Un family office est un moyen, non une fin. La fin est la préservation et la transmission ordonnée du patrimoine familial. Les familles qui perdent de vue cette distinction construisent des institutions qui servent le bureau plutôt que la famille.

Un cadre pour la décision de création

Avant de s'engager dans la création d'un single-family office, une famille devrait évaluer honnêtement cinq dimensions. Premièrement, la taille des actifs : la base d'actifs investissables dépasse-t-elle 200 M CHF/EUR, et est-elle susceptible de s'y maintenir sur l'ensemble d'un cycle de marché ? Deuxièmement, la complexité : la famille détient-elle des actifs transfrontaliers, des positions illiquides ou des participations dans des sociétés opérationnelles qui nécessitent réellement une supervision dédiée ? Troisièmement, la maturité de la gouvernance : la famille est-elle prête à rédiger et ratifier une charte familiale et une politique d'investissement avant l'ouverture du bureau ? Quatrièmement, l'accès aux talents : la famille est-elle implantée dans — ou disposée à attirer des talents depuis — une place financière disposant d'un vivier crédible de professionnels de family office, telle que Genève, Zurich, Paris ou Luxembourg ? Cinquièmement, la pérennité : l'intention est-elle de maintenir le family office sur au moins quinze à vingt ans, horizon minimum sur lequel la base de coûts fixes devient économiquement justifiable ? Une famille qui répond oui à l'ensemble de ces cinq critères est candidate sérieuse à un single-family office. Une famille qui répond oui à deux ou trois d'entre eux devrait examiner sérieusement un multi-family office, ou un modèle hybride externalisant la gestion des investissements et la compliance fiscale tout en maintenant une fonction de gouvernance interne allégée. Le pire résultat n'est pas de ne pas créer un family office. Le pire résultat est d'en créer un prématurément, d'accumuler une dette de gouvernance et de découvrir trois ans plus tard que la structure est devenue une source de conflits familiaux plutôt que de cohésion familiale.