Harington Technologies504636390

Data Lake, et si ce n'était plus la seule alternative de stockage en Big Data Il est vrai qu’il offre l’avantage d’ingérer (streaming) et de stocker de manière aveugle TOUTES les données brutes (format natif, données non structurées) … ce qui est en soit contraire au principe de l’intégration de données (ETL) dans des Data Warehouse par nature organisés. Peu importe l’utilité des données, leur pertinence, leur usage (ou non), leur sécurisation ni leur gouvernance dans le temps 🙁 On comprend clairement l’avantage car on peut stocker en volume toutes les data dans toute leur variété et leur diversité …. Et le stockage coûte finalement de moins en moins cher dans le cloud. Alors pourquoi se priver ? L'avantage du Datalake est que l'on peut puiser dedans à la demande pour aller explorer des tendances par exemple. C'est une solution économique et un gisement inépuisable de données quelque soit leur structure, les Data Scientists en sont fans -) En revanche, les ingénieurs de la Data commencent à émettre des réserves… 👉 Déjà, vu que les données sont en « vrac », à chaque investigation ou analyse, il faut repartir de zéro ! 👉 Il y a aussi des problèmes d’éthique et de responsabilité environnementale qui commencent à peser sur les consciences... En effet, d’ici 2030, les Data Centers du monde entier pourraient engloutir 10% de la production mondiale d’électricité contre déjà 3% à l’heure actuelle. Aujourd’hui, les Data Centers représentent à eux seuls 17% de l’empreinte carbone de la technologie. Avec 2% des émissions totales de gaz à effet de serre, leur empreinte carbone est similaire à celle de l’aviation de l’industrie. Et d’ici 2040, le stockage de données pourrait représenter 14% des émissions, soit autant que les États-Unis aujourd’hui !! Et au niveau respect des données personnelles ? Difficile dans un datalake de supprimer des informations personnelles comme l’impose le RGPD… La bonne nouvelle ? On assiste à l’émergence d’un mode hybride pour concevoir des entrepôts de données dits « déconstruits » ou lakehouse, compromis entre les entrepôts et les datalake ainsi qu'une nouvelle conception d’architecture de données, le datamesh. 2022 devrait très être riche en innovations technologiques data ! À suivre avec HARINGTON, sur notamment les innovations chez Teradata, Databricks, Informatica et Snowflake.