Témoignages de clients / Logiciels et Internet / États-Unis
Autodesk crée une analytique du big data fiable et économique à l'aide d'Amazon EMR
Découvrez comment la société de logiciels de conception d'ingénierie et de divertissement 3D Autodesk a migré vers Amazon EMR, améliorant ainsi ses performances et sa fiabilité tout en réduisant ses coûts.
Aucun temps d'arrêt de service
après la migration vers Amazon EMR
Disponibilité de 99,8 %
pour les charges de travail open source
Réduction de 30 %
des coûts
Mise à l'échelle automatique implémentée
pour prendre en charge la trajectoire de croissance
Réduction de 25 %
des heures passées à résoudre les problèmes
Présentation
Pour Autodesk, les données sont le moteur des décisions métier et des stratégies de croissance. À ce titre, la fiabilité de son cadre de big data est essentielle à sa réussite. Confrontée à des pannes prolongées et à des problèmes d'efficacité liés à sa solution big data tierce, Autodesk a cherché une solution de remplacement plus fiable, capable de se mettre à l'échelle pour soutenir sa croissance continue.
En se tournant vers Amazon Web Services (AWS), Autodesk est parvenue à migrer son environnement de données complexe vers Amazon EMR, une solution de big data dans le cloud de pointe pour le traitement de données à l'échelle du pétaoctet, l'analytique interactive et le machine learning (ML) à l'aide de cadres open source. Désormais, il peut exécuter des charges de travail de big data hautement performantes à grande échelle avec des performances rapides et sans interruption ou interruptions prolongées.
Opportunité | Utilisation d'Amazon EMR pour améliorer le traitement big data chez Autodesk
Fondée en 1982, Autodesk produit des logiciels de conception, d'ingénierie et de divertissement 3D utilisés par plus de 100 millions de clients dans le monde. Son logiciel AutoCAD aide les architectes, les ingénieurs et les professionnels de la construction à créer des dessins numériques précis. En tant qu'entreprise axée sur les données, Autodesk utilise l'analytique et des informations pour proposer de meilleures solutions et fonctionnalités à ses clients. Cependant, sa solution de big data tierce ne parvenait pas à suivre sa croissance.
« Notre précédente solution présentait de nombreux problèmes de fiabilité », explique Nick Wilson, senior engineering manager chez Autodesk. « Les données constituent une unité fondamentale de l'activité d'Autodesk. Nous avions besoin d'un nouveau fournisseur capable d'offrir la fiabilité dont nous avions besoin et de suivre notre trajectoire de croissance. »
Après avoir évalué différentes solutions en termes de fiabilité et de performances, Autodesk a choisi de migrer vers Amazon EMR. « Autodesk est une boutique AWS, et nous utilisons depuis longtemps les services AWS », déclare M. Wilson. « AWS proposait également beaucoup plus de services pour le prix qui nous était demandé. Nous avons pu identifier un moyen de migrer chaque charge de travail de notre fournisseur tiers vers Amazon EMR et d'autres services AWS. »
En migrant vers Amazon EMR, nous avons réduit nos coûts de 30 %. En outre, nous avons réussi à réduire les coûts tout en améliorant considérablement notre niveau de sécurité. »
Anitha Matta
Engineering Manager of Platform Infrastructure, Autodesk
Solution |Migration de pétaoctets de données tout en renforçant la sécurité et la fiabilité grâce au programme d'accélération des migrations AWS
La migration des charges de travail big data d'Autodesk vers Amazon EMR ne serait pas une tâche aisée. En effet, cet effort impliquerait la migration des charges de travail de 30 équipes différentes, chacune utilisant différents langages de codage et exécutant différents types de requêtes. En outre, toutes les charges de travail stratégiques d'Autodesk étaient exécutées sur la solution tierce, et l'entreprise devait éviter des interruptions inutiles au cours du processus. Pour faciliter cette migration complexe, Autodesk a participé au programme d'accélération des migrations AWS (AWS MAP), qui permet d'accélérer la migration vers le cloud et les processus de modernisation grâce à une méthodologie axée sur les résultats. AWS MAP a non seulement aidé Autodesk dans les aspects techniques de la migration, mais le programme a également fourni des crédits pour compenser certains coûts.
« Chaque fois que vous migrez vers un nouveau service, le calcul ne sera pas optimisé tant que vous n'aurez pas acquis une certaine expérience », explique M. Wilson. « Grâce à la tarification d'AWS MAP, nous avons minimisé l'impact de la migration sur nos résultats financiers et effectué une transition fluide. »
Autodesk exécute Apache Spark, un moteur d'analytique unifié open source, sur Amazon EMR qui lui sert de moteur de calcul principal. Les clusters Spark prennent en charge tous les pipelines de traitement des données et d'extraction, de chargement et de transformation. Pour gérer sa charge de données, Autodesk associe des volumes optimisés par Amazon Elastic Block Store (Amazon EBS), un service de stockage par blocs évolutif et à hautes performances, aux instances Spark. Ces services se mettent à l'échelle de manière fluide pour traiter les données d'Autodesk, qui s'élèvent à 1 Po et qui augmentent chaque mois. Pour alimenter les tableaux de bord et assurer l'analytique, Autodesk exécute Presto, un moteur de requêtes SQL distribué open source, sur Amazon EMR.
« Presto sur Amazon EMR est un élément fondamental du flux des développeurs », déclare M. Wilson. « Il permet à notre équipe d'interagir avec les données et d'en tirer des enseignements, mais aussi de fournir des informations métier générales pour aider à développer de nouveaux produits. »
En adoptant Amazon EMR, Autodesk a considérablement amélioré la fiabilité de son service de big data. Pour les charges de travail qui s'appuient sur Apache Spark et Presto, l'entreprise a atteint une disponibilité de 99,8 % et n'a connu aucune panne ni interruption de service significative. Autodesk a également réduit de 25 % les heures consacrées au dépannage.
L'équipe de développement apprécie beaucoup cette fiabilité constante et peut désormais concentrer ses ressources sur d'autres domaines de l'activité. « Avant, je ne voulais pas regarder les communications de l'entreprise le dimanche. J'ai constaté que des processus stratégiques étaient interrompus parce que notre solution tierce était défaillante », déclare M. Wilson. « Aujourd'hui, nos pipelines fonctionnent de manière stable, les clusters s'exécutent comme prévu et nous respectons nos accords de niveau de service. Nous disposons aujourd'hui d'un système beaucoup plus stable qui s'exécute sur Amazon EMR qu'il ne l'était avant la migration. »
Diagramme d'architecture
Figure 1. Soumission de tâches et migration
Figure 1. Soumission de tâches et migration
Cliquez pour agrandir et afficher en plein écran.
Figure 2. L'architecture AWS d'Autodesk pour le traitement big data
Figure 2. L'architecture AWS d'Autodesk pour le traitement big data
Cliquez pour agrandir et afficher en plein écran.
Résultat | Amélioration des coûts, des performances et de la fiabilité du traitement big data sur AWS
En migrant son environnement big data vers Amazon EMR, Autodesk a amélioré la fiabilité, les performances et la rentabilité du service. « En migrant vers Amazon EMR, nous avons réduit nos coûts de 30 % », explique Anitha Matta, engineering manager of platform infrastructure chez Autodesk. « En outre, nous avons réussi à réduire les coûts tout en améliorant considérablement notre niveau de sécurité. »
Après le début de la migration, Autodesk a atteint la parité des coûts en l'espace de 6 mois. Ses clusters étant clairement isolés sur Amazon EMR, elle peut attribuer des coûts à des charges de travail spécifiques quasiment en temps réel. À l'aide de ces informations, ses équipes peuvent identifier le retour sur investissement de leurs projets et prendre des décisions stratégiques en vue d'améliorer la rentabilité. Autodesk peut également traiter et analyser de plus grands jeux de données à un prix quasiment identique à celui de sa solution tierce, tout en améliorant les performances et la fiabilité.
La prochaine étape pour l'entreprise consiste à mettre à niveau ses clusters Apache Spark et à adopter une architecture conteneurisée à l'aide d'Amazon Elastic Kubernetes Service (Amazon EKS), un service géré permettant d'exécuter Kubernetes dans le Cloud AWS et dans des centres de données sur site. Autodesk utilise également des services de ML tels qu'Amazon SageMaker Studio, un environnement de développement entièrement intégré, pour intégrer des fonctionnalités avancées au sein de son organisation.
« Depuis 2013, une grande partie du parcours d'Autodesk a consisté à migrer vers le cloud. Grâce à cette migration, nous souhaitions faciliter l'accès à des données opportunes, intégrées et régies afin de stimuler notre croissance », déclare M. Wilson. « Grâce à AWS, nous avons atteint ces objectifs. En rendant les données accessibles de façon centralisée sur AWS, elles peuvent être utilisées par les équipes d'Autodesk, notamment celles chargées des produits, des activités commerciales, du marketing, des ventes et des finances. Les services AWS optimisent des fonctions critiques au sein de l'entreprise. »
À propos d'Autodesk
Autodesk fournit des produits et services logiciels dans plusieurs secteurs afin de donner aux innovateurs les moyens de concevoir. Son logiciel AutoCAD aide les architectes, les ingénieurs et les professionnels de la construction à créer des dessins numériques précis.
Services AWS utilisés
Amazon EMR
Amazon EMR est la solution de big data dans le cloud de pointe pour le traitement des données à l'échelle du pétaoctet, l'analytique interactive et le machine learning à l'aide de cadres open source, tels que Apache Spark, Apache Hive et Presto.
Amazon EBS
Amazon Elastic Block Store (Amazon EBS) est un service de stockage par bloc facile à utiliser, évolutif et haute performance conçu pour Amazon Elastic Compute Cloud (Amazon EC2).
Programme d'accélération des migrations (MAP) AWS
Le programme d'accélération des migrations (MAP) AWS est un programme de migration vers le cloud complet et éprouvé, basé sur l'expérience d'AWS glanée au fil de la migration de milliers d'entreprises clientes vers le cloud.
Plus d'articles sur Autodesk
Démarrer
Les organisations de toutes tailles et de tous secteurs transforment leur activité et exécutent leurs missions au quotidien à l'aide d'AWS. Contactez nos experts et démarrez votre transition vers AWS dès aujourd'hui.