La rationalisation de la gestion et de l’analyse des informations pour les entreprises est un thème majeur de la conférence AWS re : Develop de cette année, alors qu’Amazon dévoile de tout nouveaux services et fonctionnalités destinés à alléger les processus d’extraction, de transformation et de chargement (ETL) et à offrir une assistance pour le catalogage et la navigation des informations dans les organisations.
AWS a lancé 2 toutes nouvelles capacités : la combinaison d’Amazon Aurora sans ETL avec Amazon Redshift et l’intégration d’Amazon Redshift pour Apache Spark, qui, selon elle, rendront l’ETL processus obsolète.
Les entreprises utilisent généralement ETL pour incorporer des données provenant de plusieurs sources dans un seul magasin d’informations cohérent à charger dans un entrepôt de données pour analyse.
Néanmoins , la plupart des ingénieurs de l’information affirment que la modification d’informations provenant de diverses sources peut être un travail long et difficile car le processus implique des actions telles que le nettoyage, le filtrage, l’amélioration et la synthèse des données brutes.
Un autre problème est le coût inclus de maintenir les équipes qui préparent les pipelines d’informations pour l’exécution des analyses, a déclaré AWS.
Les nouvelles fonctionnalités visent à éliminer l’ETL
En revanche, l’intégration Amazon Aurora zéro ETL, selon l’entreprise, élimine le besoin d’effectuer un ETL entre Aurora et RedShift car les informations transactionnelles qui sont composées dans Aurora sont dupliquées dans RedShift presque immédiatement et sont toutes prêtes pour l’exécution de l’analyse.
« Les clients peuvent reproduire les informations de nombreuses bases de données Amazon Aurora clusters dans le très mêmes circonstances Amazon Redshift pour obtenir des informations sur de nombreuses applications », a déclaré la société dans un communiqué, ajoutant que l’intégration était actuellement en préversion.
En outre, la société a déclaré qu’Amazon Redshift Combination for Apache Spark aidera les développeurs commerciaux à utiliser les services d’analyse et d’intelligence artificielle d’AWS pour développer et exécuter des applications Apache Glow sur les données d’Amazon Redshift.
Apache Spark, qui est un outil couramment utilisé par les concepteurs, est un moteur d’analyse unifié open source pour le traitement du Big Data.
« Les concepteurs peuvent commencer à exécuter des requêtes sur les données Amazon Redshift à partir d’applications basées sur Apache Spark en quelques secondes en utilisant des frameworks de langage populaires (par exemple, Java, Python, R et Scala) », a déclaré l’entreprise, ajoutant que l’intégration a été rendue accessible à tous.
Amazon DataZone pour aider à la brochure et à la recherche de données
Les sociétés de cloud computing ont en fait également prévisualisé une marque- nouveau service de gestion des données ce, surnommé Amazon DataZone. Le nouveau service de gestion des données, qui n’est pas encore disponible, devrait aider les entreprises à cataloguer, trouver, partager et gérer les informations stockées sur AWS, sur site et sur des sources tierces, a déclaré l’entreprise.
Les producteurs de données d’une entreprise peuvent configurer la brochure de données en spécifiant les sources d’informations, la taxonomie des données et les politiques de gouvernance via le portail Web du service, a déclaré AWS.
« Amazon DataZone se débarrasse de la lourde charge de préserver une brochure en utilisant l’apprentissage automatique pour collecter et recommander des métadonnées (par exemple, l’origine et le type de données) pour chaque ensemble de données et en formant sur la taxonomie et les préférences d’un consommateur pour s’améliorer progressivement », a déclaré l’entreprise dans un communiqué de presse.
Une fois le catalogue établi, les consommateurs de données peuvent utiliser le portail Web Amazon DataZone pour rechercher et découvrir des actifs de données, consulter les métadonnées pour le contexte et demander l’accès aux ensembles de données, y compris.
Dans Afin d’exécuter des analyses sur les données, les utilisateurs de l’entreprise doivent créer un Ama zon DataZone Data Task – un espace partagé sur le site Web qui permet aux utilisateurs d’extraire différents ensembles de données, de partager l’accès avec des associés et de faire équipe pour l’analyse, a déclaré AWS.
» Amazon DataZone est intégré aux services d’analyse AWS, tels qu’Amazon Redshift, Amazon Athena et Amazon QuickSight, qui permettent aux clients de données d’accéder à ces services dans le cadre de leur projet de données », a déclaré la société.
Le Le service propose également des API à intégrer à des solutions sur mesure ou à des partenaires tels que DataBricks, Snowflake et Tableau.
AWS Clean Rooms facilite la collaboration sur les informations
Afin d’aider les entreprises à faire équipe sur informations avec leurs partenaires, AWS a introduit un nouveau service, appelé AWS Clean Rooms.
Le service, qui est actuellement limité aux seuls clients AWS, est accessible via AWS Management Console, où une entreprise peuvent choisir le partenaire avec lequel ils veulent travailler ensemble, a déclaré l’entreprise, ajoutant que t La console offre des options pour choisir les ensembles d’informations à partager et configurer les approbations pour les participants.
Les ensembles de données qui sont partagés dans l’espace ordonné sont chiffrés et n’ont pas besoin de quitter l’environnement AWS ou d’être chargés dans une autre plate-forme, a déclaré AWS, ajoutant que les requêtes peuvent également être exécutées sur ces ensembles d’informations.
En outre, AWS Clean Rooms fournit un large ensemble de contrôles d’accès aux données configurables, consistant en des contrôles de questions, des contraintes de sortie de requête , et la journalisation des requêtes, qui permettent aux entreprises de personnaliser les restrictions sur les requêtes effectuées par chaque individu de la salle blanche.
AWS Clean Rooms, qui est facilement disponible en tant qu’offre autonome et dans le cadre d’AWS pour la publicité et le marketing , sera disponible début 2023 dans les régions USA Est (Ohio), USA Est (Virginie du Nord), USA Ouest (Oregon), Asie-Pacifique (Séoul), Asie-Pacifique (Singapour), Asie-Pacifique (Sydney), Asie-Pacifique (Tokyo) , Europe (Francfort), Europe (Irlande), Europe (Londres) et Europe (Stock holm).
AWS inclut de nouvelles fonctions dans Amazon QuickSight
En plus de mettre à jour d’autres services, AWS a en fait inclus de toutes nouvelles fonctions dans son service unifié de veille économique, Amazon QuickSight.
Le fournisseur de cloud a en fait ajouté la possibilité de poser des questions en langage naturel dans QuickSight au moyen d’une toute nouvelle fonctionnalité appelée QuickSight Q.
QuickSight Q utilise la détection automatique pour permettre à l’entreprise les utilisateurs posent des questions sur les données commerciales en langage naturel et obtiennent des réponses précises avec des visualisations pertinentes en quelques secondes, a déclaré l’entreprise, ajoutant que la fonctionnalité permettra aux utilisateurs de poser des questions « pourquoi » et de rechercher des projections sur les informations. L’assistance pour les prévisions et les préoccupations « pourquoi » est offerte sans frais supplémentaires à tous les clients QuickSight Q, selon l’entreprise.
QuickSight Q est également livré avec une autre capacité qui suppose immédiatement et inclut des informations sémantiques dans les ensembles de données , ce qui réduit de quelques jours à quelques minutes le temps que les groupes d’intelligence d’entreprise passent à préparer les informations pour les requêtes en langage naturel.
Cela est rendu possible par des appareils préformés découvrant des modèles et des connaissances à partir d’actifs d’intelligence d’affaires tels que des tableaux de bord et des rapports.
La possibilité de préparer immédiatement des données dans QuickSight Q est également offerte aux utilisateurs QuickSight Q existants sans frais supplémentaires.
Les autres fonctions incluses incluent la possibilité de créer des rapports paginés et une analyse rapide pour de grands ensembles d’informations.
Le service de rapport paginé est proposé en tant que service complémentaire pour les clients de l’édition QuickSight Business, a déclaré la société.
.
Toute l’actualité en temps réel, est sur L’Entrepreneur