fr.wedoany.com Rapport : TwelveLabs Inc., une entreprise d'IA spécialisée dans la compréhension vidéo, a annoncé avoir obtenu 100 millions de dollars de financement en phase de démarrage, portant son financement total à plus de 207 millions de dollars. Ce tour de série B est co-dirigé par NEA et Naver Ventures, avec la participation d'Amazon, Radical Ventures, Korea Investment Partners, Index Ventures, Quadrille Capital et Red Bull Ventures.
Jae Lee, fondateur et PDG de l'entreprise, a déclaré que le fondement de l'intelligence machine réside dans l'enregistrement dynamique de la réalité, et que la vidéo est la donnée à laquelle la compréhension doit répondre. TwelveLabs s'engage à construire des modèles multimodaux qui comprennent nativement la vidéo, plutôt que de la traiter simplement comme un outil pour les grands modèles de langage.
Ses produits phares incluent la série de modèles Marengo et Pegasus 1.5. Marengo prend en charge l'intégration d'IA du monde réel pour la vidéo, l'audio, le texte et les combinaisons, transformant divers types de contenu en structures de données lisibles par machine, facilitant ainsi la compréhension et la recherche d'informations à grande échelle par l'IA ; la version 3.0 de cette série a été publiée à la fin de l'année dernière. Pegasus, quant à lui, transforme la vidéo en données structurées, comprenant les limites de scène, les entités et les segments temporels, permettant aux grands modèles de langage de raisonner à travers les informations visuelles. Son fonctionnement est similaire à la façon dont les grands modèles de langage traitent les documents et les images, en utilisant un langage de balisage pour résumer la vidéo afin de la rendre plus facile à comprendre. Le modèle maintient un mécanisme de mémoire persistant à travers les requêtes, capable d'accumuler des connaissances à mesure que le contenu vidéo se complexifie.
L'entreprise prévoit de construire un nouveau paradigme de perception vidéo basé sur ces modèles, permettant l'analyse, la recherche et la manipulation de contenu vidéo. Cette technologie peut être appliquée à des secteurs tels que la sécurité, la publicité, le sport et l'automobile, où il existe une grande quantité d'informations vidéo.
Dans le cadre de ce financement, TwelveLabs approfondit sa collaboration avec Amazon Web Services. Ses services sont disponibles sur AWS Marketplace depuis 2025 et offrent un accès hébergé aux modèles de base via Amazon Bedrock. TwelveLabs a signé un engagement pluriannuel pour optimiser les charges de travail d'inférence vidéo basées sur les puces AWS Trainium, et ses futurs modèles de pointe seront d'abord déployés sur la plateforme AWS.
