Woordenlijst
Wat is data lake?
Een data lake is een opslagplaats voor grote hoeveelheden ruwe data in elk formaat, zoals tabellen, bestanden en logs. De structuur bepaal je pas bij het lezen van de data.
Data lake uitgelegd
Een data lake draait meestal op goedkope objectopslag in de cloud, zoals Azure Data Lake Storage of Amazon S3. Je zet er bestanden in zoals ze zijn: CSV, JSON, Parquet, logbestanden of afbeeldingen. Dat principe heet schema-on-read: pas wie de data gebruikt, bepaalt hoe die gelezen wordt.
Dat maakt een lake flexibel en geschikt voor grote volumes, data science en ongestructureerde data. Het risico is dat het een moeras wordt: veel bestanden zonder duidelijke eigenaar, versie of betekenis, waar niemand meer op durft te vertrouwen.
Voor vaste rapportage en KPI's heb je daarom meestal nog een gestructureerde laag nodig, zoals een datawarehouse of lakehouse. Een lake vervangt die laag niet, maar dient vaak als opslag voor de ruwe brondata.
Voorbeeld
Acme Groothandel bewaart de ruwe exportbestanden van zijn webshop en de sensordata van zijn magazijn in een data lake. Voor het maandelijkse managementdashboard worden alleen de gecontroleerde verkoopcijfers daarvan naar het datawarehouse gebracht.
Data lake in ENABLE
ENABLE werkt niet met een data lake als bron: de SQL Explorer, de Data-API en de Dashboard Builder (pilot) lezen uit het PostgreSQL-datawarehouse van de klant. Data uit een lake kan wel buiten het portaal naar dat warehouse worden geladen.
FAQ
Veelgestelde vragen
Wat is het verschil tussen een data lake en een datawarehouse?
Een data lake bewaart ruwe data in elk formaat, een datawarehouse bewaart gestructureerde, opgeschoonde tabellen voor rapportage. Een lake is flexibeler, een warehouse betrouwbaarder voor vaste cijfers.
Wanneer heb je een data lake nodig?
Bij grote hoeveelheden of veel soorten data, zoals logbestanden, sensordata of documenten, en voor data science. Voor standaardrapportage op ERP- en CRM-data is een datawarehouse vaak voldoende.
Wat is een data swamp?
Een data swamp is een data lake dat onbruikbaar is geworden doordat niemand meer weet welke data er staat, waar die vandaan komt en of hij klopt. Goede afspraken over eigenaarschap en een datacatalogus helpen dat te voorkomen.
Verder lezen
- KennisbankWat is een datawarehouse? Uitleg en vergelijkingEen datawarehouse is een centrale database waarin je gegevens uit verschillende bronsystemen, zoals je ERP, CRM en webshop, samenbrengt, opschoont en zo inricht dat je er goed op kunt rapporteren en analyseren. Een bronsysteem is gemaakt om transacties te verwerken; een datawarehouse is gemaakt om te lezen, te vergelijken en historie te bewaren. Een data lake bewaart ruwe data in elk formaat, en een data lakehouse combineert de opslag van een lake met de structuur van een warehouse.Lees meer
- OplossingData platform laten bouwen: lagen, keuzes en aanpakVan bronnen tot dashboards en AI: zo is een data platform opgebouwd.Lees meer
- OplossingMicrosoft Fabric: wat het is en wanneer het pastWat Microsoft Fabric is, wanneer het past en hoe het zich verhoudt tot ENABLE.Lees meer
- KennisbankWoordenlijst data, AI en Power BIWat is een service principal, row-level security, een semantisch model, text-to-SQL of RAG? Korte, heldere definities van begrippen rond data, Power BI en AI.Lees meer
AI gebruiken op je eigen data. Veilig, en zonder hoofdpijn.
In een online demo laten we zien hoe ENABLE je data veilig beschikbaar maakt en hoe je erop bouwt: een app beschrijven in de AI Builder, vragen in gewone taal, dashboards en API's. En hoe wij het voor je inrichten en beheren.