Les données constituent depuis longtemps la monnaie sur laquelle les entreprises opèrent – ​​et elles vont jusqu’au sommet. Les analystes et les leaders d’opinion soulignent presque universellement l’importance de la Le PDG est activement impliqué dans les initiatives de données. Mais ce qui est enfoui dans les petits caractères, c'est la reconnaissance du fait que de nombreux projets de données ne parviennent jamais à la production. En 2016, Gartner l'a évalué à seulement 15 %.

L’opérationnalisation des projets de données a été un facteur clé pour aider les organisations à transformer un déluge de données en une stratégie de transformation numérique réalisable, et DataOps poursuit là où DevOps a commencé. Mais il y a un autre avertissement de Gartner : les organisations qui ne disposent pas d’un cadre d’opérationnalisation durable des données et des analyses d’ici 2024 le feront. voir leurs initiatives reculer jusqu'à deux ans.

L'opérationnalisation nécessite une bonne orchestration pour fonctionner, comme le souligne Basil Faruqui, directeur du marketing des solutions chez BMC, explique. « Si vous envisagez de créer un pipeline de données, que vous réalisiez un simple projet de BI ou un projet complexe d'IA ou d'apprentissage automatique, vous disposez de l'ingestion de données, du stockage et du traitement des données, ainsi que de la compréhension des données – et sous-jacents à tous ces quatre étapes, une variété de technologies différentes sont utilisées », explique Faruqui. "Et tout le monde est d'accord sur le fait qu'en production, cela devrait être automatisé."

C'est là qu'intervient Control-M de BMC, et en particulier BMC Helix Control-M. Control-M fait partie intégrante de nombreuses organisations depuis plus de trois décennies, permettant aux entreprises d'exécuter quotidiennement des centaines de milliers de tâches par lots et d'aider optimiser des opérations complexes telles que la gestion de la chaîne d’approvisionnement. Mais un paysage technologique de plus en plus complexe, du sur site au cloud, ainsi qu'une utilisation accrue de l'orchestration basée sur SaaS parallèlement à la consommation, en ont fait un il est évident de lancer BMC Helix Control-M en 2020.

« Les CRM et les ERP empruntaient la voie du SaaS depuis un certain temps, mais nous avons commencé à constater une demande croissante de la part du monde des opérations pour des modèles de consommation SaaS », explique Faruqui.

Le résultat d’être une entreprise mature (BMC a été fondée en 1980) est que de nombreux clients ont simplement étendu Control-M à des cas d’utilisation plus modernes. Le fabricant de produits alimentaires Hershey's est un exemple de grande organisation – et client de longue date de BMC – gérant une chaîne d'approvisionnement extrêmement complexe.

Outre la nécessité urgente de gérer une entreprise de produits périssables et délicats, l'entreprise a adopté de manière significative Azure, en déplaçant certaines applications ETL existantes vers le cloud, tandis que les opérations de Hershey reposent sur un environnement SAP complexe. Au milieu de cette infrastructure, Control-M, selon les mots de Todd Lightner, analyste chez Hershey, « dirige littéralement notre entreprise ».

Faruqui revient sur les étapes d'ingestion, de stockage, de traitement et d'analyse des données pour expliquer comment Hershey's s'attaquerait à une importante campagne de vacances ou déciderait où expédier les produits. «Tout est basé sur les données», explique Faruqui. « Ils ingèrent des données provenant de nombreux systèmes d'enregistrement, qui ingèrent des données extérieures à l'entreprise ; ils intègrent tout cela dans d'énormes lacs de données où ils exécutent des algorithmes d'IA et de ML pour comprendre un grand nombre de ces résultats, et alimentent la couche d'analyse où les dirigeants d'entreprise peuvent consulter des tableaux de bord et des rapports pour prendre des décisions importantes.

« C'est un très bon exemple de quelqu'un qui a utilisé l'orchestration et l'automatisation avec Control-M comme option stratégique pour eux », ajoute Faruqui.

Mais cela nous amène à un autre point important. DataOps est un élément important de la stratégie de BMC, mais ce n'est pas le seul. « Les pipelines de données dépendent d'une couche d'applications situées au-dessus et en dessous d'eux », explique Faruqui. « Si vous pensez à Hershey's, en essayant de déterminer quel type de promotion ils devraient organiser, une grande partie de ces données peuvent provenir de SAP. Et SAP n'est pas un système statique ; c'est un système qui est constamment mis à jour avec des flux de travail.

« Alors, comment le pipeline de données sait-il que SAP est réellement terminé et que les données sont prêtes pour le démarrage du pipeline de données ? Et lorsqu'ils déterminent la stratégie, toutes ces informations doivent retourner à SAP, car la commande des matières premières et tout le reste ne se fera pas dans le pipeline de données, mais dans les ERP », ajoute Faruqui.

"Control-M est donc capable de se connecter à travers cette couche, ce qui est différent de la plupart des outils qui existent dans l'espace DataOps."

Faruqui s'exprime au Salon européen de l'IA et du Big Data à Amsterdam en septembre sur la manière dont l'orchestration et l'opérationnalisation constituent la prochaine étape du parcours DataOps des organisations. Attendez-vous donc non seulement à des histoires et à des bonnes pratiques sur ce à quoi ressemble un parcours réussi et sur la façon de créer une orchestration de pipelines de données dans des environnements hybrides combinant plusieurs cloud et sur site, mais aussi à un regard sur l'avenir – et selon Faruqui, la complexité est aller seulement dans un sens.

« Je pense que l'une des choses qui continueront à être difficiles est qu'il y a tout simplement de nombreux outils et capacités différents qui apparaissent dans l'espace de l'IA et du ML », explique-t-il. « Si vous regardez AWS, Azure, Google, et que vous allez sur leur site Web et que vous cliquez sur leurs offres AI/ML, c'est assez étendu, et à chaque événement qu'ils organisent, ils annoncent de nouvelles capacités et services. C'est donc du côté du fournisseur.

« Du côté des clients, nous constatons qu'ils souhaitent tester rapidement et déterminer quels [tools] vont leur être utiles », ajoute Faruqui. « En tant que fournisseur d'orchestration, et d'orchestration en général au sein de DataOps, c'est à la fois un défi et une opportunité.

« Le défi est que vous allez devoir suivre le rythme, car l'orchestration ne fonctionne pas si vous ne pouvez pas intégrer quelque chose de nouveau – mais l'opportunité ici est que nos clients le demandent.

"Ils ne veulent pas avoir à réinventer la roue de l'orchestration à chaque fois qu'ils adoptent une nouvelle technologie."

photo par Larisa Birta sur Unsplash

Vous souhaitez en savoir plus sur l’IA et le Big Data auprès des leaders du secteur ? Vérifier Salon de l'IA et du Big Data se déroulant à Amsterdam, en Californie et à Londres. L'événement complet est co-localisé avec Semaine de la transformation numérique.

Découvrez d'autres événements et webinaires technologiques d'entreprise à venir proposés par TechForge ici.