La plateforme Synchronized transforme des vidéos passives et linéaires en « smart vidéos ». Son intelligence artificielle comprend le contenu d'une vidéo et l'enrichit de métadonnées.

Ces métadonnées vont être confrontées à des règles éditoriales et vont se transformer en objets immédiatement manipulables et exploitables, par les équipes éditoriales et marketing de TF1.

Ces vidéos une fois enrichies bénéficient d'une interactivité aussi forte qu'un document hypertexte avec des capacités de recherche, d’indexation, de navigation, et de fonctionnalités web.

Les clients Synchronized utilisent la plateforme pour automatiser des processus entiers de la transformation des contenus de la télévision linéaire vers leurs offres digitales, pour mieux adresser leurs consommateurs par des expériences personnalisées et enrichies.

La start-up a mis en place sa solution auprès de MyTF1, la plateforme de vidéo à la demande de TF1, première chaîne de télévision française en clair.

Quand l’IA vient en appui de l’éditorial

Dans le cadre de la refonte de l’ensemble de l’architecture et de l’expérience utilisateur de myTF1, il était impératif pour TF1 d’automatiser la création de vignettes vidéo. La taille de leur catalogue grandissant il ne pouvait plus être supporté par une équipe éditoriale, celle-ci devant se consacrer à des tâches à plus forte valeur ajoutée.

Thomas Bidet, Product Owner chez MyTF1, raconte :

« En plus du challenge d’automatisation, il était impératif d’assurer une haute qualité dans la création de vignettes pour chaque programme audiovisuel, celles-ci étant aussi importantes que les images de produits dans les sites d’e-commerce, car le taux de clic impacte le business. Mais aussi assurer une cohérence d’ensemble et un contrôle total de la ligne éditoriale. La même homogénéité dans l’expérience utilisateur que les grandes entreprises numériques arrivent à tenir avec des catalogues très profonds ».

« Ce sont plusieurs centaines d'heures de contenus qui étaient traitées manuellement par l'équipe éditoriale de TF1 chaque mois. Le service Smart-Thumbnails de la plateforme Synchronized a automatisé l’ensemble des tâches de ce processus long et fastidieux de création et de sélection des vignettes » explique Guillaume Doret, CEO de Synchronized.

Problématique :

• Générer automatiquement des vignettes pour chaque programme présent sur MyTF1
• S’assurer de la qualité des vignettes, selon des critères éditoriaux précis
• Pouvoir se concentrer sur son cœur de métier

L’ensemble des images d’une vidéo sont automatiquement analysées et traitées par la plateforme Synchronized qui s’appuie sur AWS Rekognition pour générer une masse de données très importante comme la reconnaissance de visages, d’émotions, d’objets, de textes.

Cette masse de data se confronte aux règles éditoriales préalablement paramétrées dans la plateforme, toutes les images qui correspondent aux règles vont être retenues comme images candidates, et notre algorithme sélectionne la meilleure parmi toutes.

Les éditeurs de TF1 ont la possibilité de venir consulter en trois cliques dans Synchronized Studio l’ensemble des suggestions et choisir des résultats alternatifs s'ils le souhaitent.

« Le résultat est récupéré et envoyé vers le CMS de TF1 qui va automatiquement publier la vignette sur le site MyTF1 » précise Guillaume Doret.

Par exemple pour les téléfilms : « La règle éditoriale est d’avoir l’acteur le plus représenté dans l’épisode, cadré à droite de l’image, les yeux bien ouverts et le regarde qui porte à gauche ».

« Nous avons initialement construit notre architecture chez AWS, couplée à des services extérieurs, mais nous nous sommes rapidement aperçus qu’il était plus efficient d’embrasser complètement les technologies d’AWS » indique Guillaume Doret, fondateur et CEO de Synchronized. « Pouvoir travailler dans un écosystème complet est un gain de temps et d’argent à chaque phase du développement jusqu’à la maintenance ». Il poursuit : « Nous avons débuté en travaillant en autonomie. AWS met beaucoup de ressources, de documentation à disposition, tout est efficace et clair. On peut tester les prototypes et les déployer rapidement ».

Guillaume Doret raconte : « Les technologies offertes par AWS permettent de nous concentrer sur notre valeur ajoutée : rendre les données générées par l’intelligence artificielle dans le domaine de la vidéo exploitable directement sans connaissance technique par des équipes de créatifs, éditoriale et marketing. AWS met à disposition des développeurs des briques technologiques très puissantes et très souvent au seuil de l’état de l’art. Cela nous permet de consacrer toute notre énergie à l’innovation liée à tout ce qui se passe dans une vidéo et notre position singulière sur le marché ».

Synchronized estime qu’AWS est la plateforme idéale pour une startup, pour prototyper très rapidement et créer une architecture pérenne qui puisse adresser de façon industrielle de gros enjeux comme ceux de TF1. « On bénéficie d’un accompagnement très efficace qui sécurise énormément nos équipes et permet de valider rapidement nos choix ou de les faire évoluer judicieusement » apprécie Guillaume Doret. « Quand on aborde une nouvelle problématique, on sait qu’on peut y aller sereinement, on passe de la preuve de concept au produit industriel et « scalable » naturellement et sans rupture ».

La sécurité est un point critique pour la startup comme pour TF1. « Le fait que notre plaforme et notre architecture s’appuient sur AWS a permis de traiter le sujet facilement et rapidement. Autrement, cette question aurait pu devenir un sujet de ralentissement ».

Pour automatiser toute la chaîne, la plateforme offre plusieurs services :

• La segmentation du contenu, qui va automatiquement comprendre une vidéo et la découper en fonction de la typologie du programme. C’est du machine learning, et Synchronized a déposé un brevet sur cette technologie.
• Smart Thumbnail, la création automatique de vignettes. Elle repose à 100 % sur AWS Rekognition. « On n’a même pas à gérer l’entraînement de l’IA. Nous fournissons un jeu de données et toute l’intelligence est d’aller les manipuler pour les confronter à des règles éditoriales ». Cette partie d'IA est complètement déléguée à AWS.
• Smart-Tagging, la catégorisation et la qualification de contenu par des tags et des labels comme les personnalités publiques figurant dans une vidéo.

En plus d’automatiser des workflows pour gagner en temps en coûts et en qualité, Synchronized va générer des datas qui n’existaient pas avant, qu’il n’était manuellement pas possible de créer, et qui offrent de nouvelles opportunités d’exploitation.

Chaque mois, plus d'un demi-millier d'heures de programmes de TF1 sont traités. Les données représentent à elles seules au total 10 TB « Grâce à AWS, on a cette capacité à augmenter significativement le nombre de données générées sur une vidéo, ce qui nous permet de couvrir un nombre de cas d’usages de plus en plus conséquents. Et c’est bien le sujet dans lequel on est avec TF1 » complète Guillaume Doret.

Dans la continuité de cette relation nouée avec AWS, Synchronized a accès à des ressources qui lui permettent d’optimiser son architecture, et de préparer les prochaines évolutions. La startup a ainsi testé et exploité très rapidement les nouveaux services d’AWS Rekognition comme le module Video Segment Detection, un nouveau service d’AWS Reko qui permet, entre autres, de détecter automatiquement des segments ou des chapitres, et les crédits dans une vidéo.

« La beauté du système aujourd’hui, c’est qu’une startup peut entreprendre des développements avec une ambition extrêmement forte tout en se basant et en travaillant avec des entreprises comme AWS, qui mettent à disposition les résultats de leurs recherches et de leur travail. Il y a 15 ans ce n’était pas abordable. Chacun devait réinventer la roue en permanence. Maintenant, ces synergies décuplent l’innovation ! » conclut Guillaume Doret.

• 10 TB de données générées liées aux vignettes
• ½ millier d'heures de vidéos analysées chaque mois
• Des centaines d’heures gagnées chaque mois par les éditeurs