Databricks versnelt de opzet van data lakehouses met Databricks Ingest

Amsterdam, 24 februari 2020 – Databricks, marktleider op het gebied van unified data analytics, integreert vanaf vandaag Databricks Ingest in hun Unified Data Analytics Platform. In combinatie met het Databricks Ingestion partnernetwerk kunnen datateams nu makkelijker databeheer, business intelligence (BI) en machine learning (ML) combineren in een data lakehouse, een nieuwe databeheermethode die de beste aspecten van data lakes en data warehouses verenigt.

Bedrijven moesten hun beschikbare data oorspronkelijk opsplitsen in traditionele, gestructureerde data en big data. Deze datasets werden vervolgens los van elkaar gebruikt voor BI- en ML-cases. Hierdoor werden de data lakes en data warehouses van elkaar gescheiden. Dat leidde tot trage verwerkingsprocessen en gefragmenteerde resultaten, die ofwel te vertraagd ofwel te incompleet waren om ze effectief in te kunnen zetten. Dit verandert met Databricks Ingest, waarmee klanten gemakkelijk vanuit verschillende databronnen hun data direct toe kunnen voegen aan Delta Lake: open source technologie om betrouwbare en snelle data lakehouses op te zetten. Het bijbehorende partnernetwerk bestaat uit ingebouwde integraties met Fivetran, Qlik, Infoworks, Steamsets en Syncsort, die het mogelijk maken om geautomatiseerd data in te laden. Azure Databricks klanten konden overigens al gebruik maken van de ingebouwde integratie met Azure Data Factory om data vanuit verschillende bronnen in te laden.

“Data-silo’s, trage processen en gefragmenteerde resultaten zijn allemaal belangrijke drijfveren in het overschakelen naar lakehouses,” zegt Ali Ghodsi, medeoprichter en CEO van Databricks. “Data lakehouses combineren de betrouwbaarheid van data warehouses met de omvang van data lakes om elke gewenste use case te ondersteunen. Om deze data-architectuur goed te laten werken, moet het makkelijk zijn om ieder type data in te laden. Databricks Ingest is een belangrijke stap in die richting.”

“Databricks ondersteunt onze machine learning en business intelligence in uiteenlopende aspecten van onze bedrijfsvoering, van auto-inventarisbeheer tot prijsvoorspellingen en technische werkzaamheden, door gebruik te maken van honderden terabytes aan data,” zegt Greg Rokita, Executive Director Technology bij Edmunds. “Onze visie op het gebied van data is volledig afgestemd op de lakehouse-methode. Delta Lake is het beginpunt van al onze machine learning en rapportageprocessen. We zijn enthousiast over Databricks Ingest: het zal het zeker makkelijker maken om data in ons Delta Lake te laden.”

Data uit applicaties als Salesforce, Marketo, Zendesk, SAP en Google Analystics, databases zoals Cassandra, Oracle, MySQL en MongoDB en bestandsopslagdiensten zoals Amazon S3, Azure Data Lake Storage en Google Cloud Storage kan eenvoudig gecombineerd worden in één data lakehouse voor alle BI- en ML-vraagstukken. Naast de vandaag aangekondigde netwerkpartners zullen binnenkort integraties met onder andere Informatica, Segment en Talend beschikbaar zijn.

Daarbij kunnen auto-laadmogelijkheden ingesteld worden waarmee data het lakehouse doorlopend binnenstroomt, zonder dat daarvoor onderhoud nodig is. Wanneer data uit verschillende cloudbronnen binnenkomt, slaat Databricks Ingest deze automatisch op in het lakehouse. Zo worden de verschillende data-silo’s doorbroken en kan data door verschillende teams binnen een bedrijf worden ingezet om datagedreven innovatie mogelijk te maken en toegevoegde waarde te leveren met data science, ML en BI.

Ook de partners van Databricks zijn enthousiast over Ingest:

“Fivetran en Databricks stellen klanten in staat om big data en business context samen te brengen in één omgeving. Door onze technologieën te combineren zijn gebruikers in staat de nieuwste machine learning mogelijkheden te combineren met traditionele business intelligence, en dat allemaal in één data lakehouse,” zegt George Fraser, CEO van Fivetran.

“Qlik is marktleider in geautomatiseerde data-integratie met cloud data warehouses en data lakes. We hebben data uit meer dan 200.000 databases verhuisd binnen ’s werelds grootste bedrijven, met onze unieke Change Data Capture (CDC) technologie. Dankzij deze integratie kunnen onze klanten hun datalevering richting Delta Lake optimaliseren,” zegt Mike Capone, CEO bij Qlik. “Databricks gebruikers hebben nu betere toegang tot de data uit al hun enterprise-oplossingen inclusief mainframes, SAP, databases en data warehouses, door open data lakehouses aan Delta Lake toe te voegen.”

Lees voor meer informatie het artikel “ What is a Lakehouse?” van brancheveteranen Ben Lorica, Michael Armbrust, Ali Ghodsi, Reynold Xin en Matei Zaharia voor meer inzicht in hoe data lakehouses de opvolgers zijn van data warehouses en data lakes. Lees ook het partnerblog van Qlik: “ Qlik & Databricks: Join Forces to Accelerate Your Speed to Insights”.

Over Databricks
De missie van Databricks is datateams te helpen de meest complexe problemen op te lossen. Als marktleider in Unified Data Analytics helpt Databricks organisaties hun data gebruiksklaar voor analytics te maken, bedrijfsbeslissingen op basis van data te maken, en machine learning te implementeren om de concurrentie voor te blijven. Databricks ondersteunt wereldwijd duizenden organisaties, waaronder Comcast, Shell, Expedia, en Regeneron. Databricks wordt ondersteund door investeerders en is opgericht door de initiatiefnemers van populaire open sourceprojecten, waaronder Apache Spark, Delta Lake en MLflow. Volg Databricks op Twitter, LinkedIn en Facebook voor meer informatie.

Voor meer informatie over Databricks: www.databricks.com.

Apache, Apache Spark and Spark zijn trademarks van de Apache Software Foundation.

Databricks Persdesk
Yellow Communications
Sarada Sant
E-mail: databricks@yellow-communications.com
Tel: +31 (0)23 555 34 24

	Red Hat maakt de ‘edge’ open met enterprise Kubernetes- en automatiseringstechnologieën

	Databricks levert verbeteringen op het gebied van beveiliging en schaalbaarheid om de implementatie van ondernemingen te versnellen

	Workday People Analytics geeft automatisch inzicht in het personeelsbestand voor optimaal personeelsbeleid in een veranderende wereld

	MLflow project sluit zich aan bij Linux Foundation

	Databricks verwelkomt Paul Leventis als nieuwe Senior Director Software Engineering & Site Lead

	5 manieren waarop business intelligence gaat veranderen in 2020

	NS vervangt ERP-systemen door SAP S/4HANA

Vandaag gepubliceerd
	Oracle kondigt updates Oracle Cloud ERP, Oracle Unity & Oracle SCM en HCM aan plus nieuwe integraties Sprinklr en Zoom

	William van de Rotten nieuwe algemeen directeur Hands on

	QuandaGo en Spitch gaan partnership aan en bieden een gecombineerde oplossing voor selfservice op basis van spraakherkenning

	Iptor strengthens partnership with Medius to automate invoice processing globally

	Stichting Milo geeft gratis toegang tot digitale prentenboeken voor kinderen met een communicatiebeperking

	GTT benoemt Tom Homer tot Senior Vice President Europe & EMEA Sales Lead

	NLdigital daagt digitale sector uit meer vrouwen in de board te benoemen

	Rockwell Automation komt met belangrijke updates voor de Studio 5000 design software

	Flanderijn en Visma \| Raet sluiten partnership voor optimaliseren bedrijfsvoering

	Ruim helft van finance professionals efficiënter door coronacrisis

	FD Mediagroep kiest SentinelOne voor beveiliging endpoints

	Red Hat en Samsung werken samen voor adoptie 5G
28 september 2020
	GVB met Rubix op weg naar digitale toekomst van Amsterdams OV

	Extreme transformeert netwerkinfrastructuur van ŠKODA AUTO

	Werken in 2035: Citrix werpt licht op een intelligente toekomst

	Proofpoint blokkeerde in eerste helft 2020 salarisfraude ter waarde van 2,2 miljoen dollar per dag

	Markteffect uitgeroepen tot ‘Marktonderzoeksbureau van het Jaar 2020’

	Redkiwi & IT Campus Rotterdam slaan de handen ineen

	Amsterdam in top 3 belangrijkste datahubs van Europa

	Celonis opgenomen in Forbes Cloud 100 en HFS Top 10 Process Intelligence 2020

	Databricks levert verbeteringen op het gebied van beveiliging en schaalbaarheid om de implementatie van ondernemingen te versnellen

	MLflow project sluit zich aan bij Linux Foundation

	Databricks introduceert Delta Engine en neemt Redash over om prestaties en gebruiksgemak van data lakes te verhogen

Databricks versnelt de opzet van data lakehouses met Databricks Ingest

Met Databricks Ingest en nieuwe partnerintegraties kunnen datateams gemakkelijk data lakehouses opzetten, die de beste combinatie vormen van data lakes en data warehouses