Repenser la LDA : Moment Matching for Discrete ICA.

Résumé Nous considérons les techniques d'appariement de moments pour l'estimation dans l'allocation latente de Dirichlet (LDA). En établissant des liens explicites entre la LDA et les versions discrètes de l'analyse en composantes indépendantes (ICA), nous dérivons d'abord un nouvel ensemble de tenseurs basés sur le cumulant, avec une complexité d'échantillonnage améliorée. De plus, nous réutilisons les techniques standard de l'ICA, telles que la diagonalisation conjointe des tenseurs, pour améliorer les méthodes existantes basées sur la méthode de la puissance des tenseurs. Dans un vaste ensemble d'expériences sur des ensembles de données synthétiques et réelles, nous montrons que notre nouvelle combinaison de tenseurs et de techniques de diagonalisation conjointe orthogonale surpasse les méthodes existantes de correspondance des moments.