DDC 4 april 2023 - Azure Data Lake de extensie voor al je data

Dinsdag, 4 april 2023, door Bert Verbeek

Bij de demo van Azure Data Lake werd verteld over de vele mogelijkheden die dit platform biedt voor het beheren van grote hoeveelheden ongestructureerde data. Tijdens de presentatie werden verschillende aspecten van de Azure Data Lake benadrukt, waaronder de lage kosten, hiërarchische mappenstructuur, en de mogelijkheid om data op te slaan in zowel csv- als parquet-formaat.

Het opslaan van ongestructureerde data in Azure blob storage kan snel oplopen in kosten, daarom biedt Azure Data Lake een efficiëntere manier om met deze data om te gaan. Door het exporteren van ongestructureerde data vanuit BC naar de Azure Data Lake, kan het vervolgens verwerkt worden in een kleine SQL database.
De demo benadrukte het belang van het combineren van geëxporteerde delta's van data in csv formaat en het samenvoegen van deze data met Synapse. Het proces bestaat uit drie stappen die worden uitgevoerd via verschillende pipelines. Het opschonen van oude data kan eenvoudig worden gedaan met filters.
Het opslaan van data in parquet formaat biedt een veel efficiëntere manier van opslag dan csv, omdat parquet bestanden veel kleiner zijn. Eenmaal opgeslagen in parquet formaat, kunnen deze bestanden worden ingelezen in PowerBI.

Tijdens de demo werd ook benadrukt dat Data Lake kan worden gebruikt als goedkoop archief voor ongestructureerde data. Telemetrie kan als log worden geëxporteerd en Data Lake kan integreren met andere applicaties.

Tot slot werd benadrukt dat Dataverse geschikt is voor kleinere hoeveelheden gestructureerde data en kan integreren met andere applicaties. Als kijker van de demo werd ik geïnspireerd om aan de slag te gaan en bc2adls van GitHub te downloaden en bij te dragen aan het open source project.

Kortom, de demo van Azure Data Lake heeft me laten zien dat het een veelzijdig en krachtig platform is dat bedrijven kan helpen hun ongestructureerde data efficiënter te beheren en te analyseren.

Verslag: Edo de Roo (& ChatGPT)
Foto's: Vincent van Rens (helemaal zelf ;-) )

« Naar het overzicht

Events

13 juni 2023 - DDC Jaarevent 13 juni 2023
Oud London, Woudenbergseweg 52, 3707 HX, Zeist
Datum: 13 juni 2023
Meer informatie »

04 april 2023 - Dynamics 365 Event, 4 april 2023
Van der Valk Hotel Nuland | Rijksweg 25 | 5391 LH | Nuland
Datum: 04 april 2023
Meer informatie »

24 januari 2023 - Dynamics 365 Event, 24 januari 2023
Postillion Bunnik | Baan van Fectio 1 | 3981 HZ | Bunnik
Datum: 24 januari 2023
Meer informatie »


Nieuws

Indeling en plattegronden DDC jaarevent 13 juni 2023
05 juni 2023
Lees bericht »

Dutch Dynamics Community - Nieuwsflits * Mei 2023 * 2
31 mei 2023
Lees bericht »

Dutch Dynamics Community - Nieuwsflits * Mei 2023
12 mei 2023
Lees bericht »


Blog

DDC-avond Nuland 4 april 2023
04 april 2023
Lees blog »

DDC 4 april 2023 - Business Central Apps verkopen via AppSource - kan dat?
04 april 2023
Lees blog »

DDC 4 april 2023 - Azure Data Lake de extensie voor al je data
04 april 2023
Lees blog »

Eventdata seizoen 2022-23

  • dinsdag 15 november 2022
  • dinsdag 24 januari 2023
  • dinsdag 4 april 2023
  • dinsdag 13 juni 2023

 

Wat is de Dutch Dynamics Community?

Ons doel is het delen van kennis en ervaringen rondom Microsoft Dynamics software.

We bieden de mogelijkheid aan alle Microsoft Dynamics Professionals om met elkaar in contact te komen en deel te nemen aan presentaties en discussies.

Laagdrempelig, onafhankelijk, diepgaand en altijd actueel.

Om iedereen op de hoogte te houden kun je je inschrijven voor een van onze nieuwsbrieven:

Schrijf je hier in voor de onze nieuwsbrief

Platinum sponsors


Gold sponsors

 

Sapphire sponsors


Silver sponsors


Club van 100

c100