Sie sind hier: Startseite » Markt » Unternehmen

Offener Standard für Data Lakes werden


Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud: Das Delta Lake Projekt wird an die Linux Foundation übergeben
Das zunehmende Engagement der Community zeigt die Begeisterung für Open Source und fördert branchenweite Innovationen für datengesteuerte Initiativen


Die Linux Foundation, die gemeinnützige Organisation, die Masseninnovationen durch Open Source ermöglicht, gab bekannt, dass sie Delta Lake hosten wird, ein Projekt, das sich auf die Verbesserung der Zuverlässigkeit, Qualität und Leistung von Data Lakes konzentriert. Delta Lake wurde von Tausenden von Organisationen übernommen und verfügt über ein florierendes Ökosystem von Unterstützern, darunter Intel, Alibaba und Booz Allen Hamilton. Um die Akzeptanz und die Beiträge zur Weiterentwicklung weiter zu steigern, wird Delta Lake zu einem Linux Foundation-Projekt und einem offenen Governance-Modell.

Jedes Unternehmen strebt danach, durch Data Science, Machine Learning und Analytics mehr Werte aus Daten zu ziehen, aber sie werden massiv durch die mangelnde Datensicherheit in den Data Lakes behindert. Delta Lake löst Herausforderungen bei der Datenzuverlässigkeit, indem es die Transaktionen ACID-konform macht und gleichzeitiges Lesen und Schreiben ermöglicht. Seine Fähigkeit zur Durchsetzung von Schemas trägt dazu bei, dass der Data Lake frei von korrupten und nicht konformen Daten ist. Seit seiner Einführung im Oktober 2017 wurde Delta Lake von über 4.000 Unternehmen angenommen und verarbeitet jeden Monat über zwei Exabyte an Daten.

"Delta Lake unter das neutrale Haus der Linux Foundation zu bringen, wird der vom Projekt abhängigen Open-Source-Community helfen, die Technologie zu entwickeln, die sich mit der Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud befasst", sagte Michael Dolan, VP of Strategic Programs bei der Linux Foundation. "Die Linux Foundation unterstützt Open-Source-Communities dabei, ein offenes Governance-Modell zu nutzen, um einen weitgefächerten Beitrag der Industrie und die Konsensbildung zu ermöglichen, was den Stand der Technik für Datenspeicherung und -zuverlässigkeit verbessern wird."

Die Mitbegründer von Databricks sind die ursprünglichen Entwickler des Open-Source-Projekts Apache Spark, der Unified Analytics-Plattform, die sich zum Standard für die groß angelegte Datenverarbeitung entwickelt hat. Der CEO und Mitbegründer von Databricks, Ali Ghodsi, zeigt sich begeistert, diese Reise mit dem Delta Lake Projekt erneut zu unternehmen. "Unser Team hat weiterhin Open-Source-Projekte entwickelt und unterstützt, weil wir wissen, dass dies der schnellste und umfassendste Weg zur Innovation ist. Um die Datenherausforderungen von Unternehmen zu bewältigen, wollen wir sicherstellen, dass dieses Projekt Open Source in der wahrsten Form ist. Durch die Stärke der Linux Foundation Community und die Beiträge sind wir zuversichtlich, dass Delta Lake schnell zum Standard für die Datenspeicherung in Data Lakes werden wird."

Delta Lake wird über ein offenes Governance-Modell verfügen, das die Beteiligung und den technischen Fortschritt fördert und einen Rahmen für eine langfristige Betreuung durch ein Ökosystem bietet, das in den Erfolg von Delta Lake investiert hat. Obwohl Delta Lake ursprünglich für die Zusammenarbeit mit Apache Spark konzipiert war, hat es eine florierende Community entwickelt, die Unterstützung für andere Open-Source-Datensysteme bietet. (Linux Foundation: ra)

eingetragen: 17.10.19
Newsletterlauf: 28.11.19

Linux Foundation: Kontakt und Steckbrief

Der Informationsanbieter hat seinen Kontakt leider noch nicht freigeschaltet.


Kostenloser PMK-Verlags-Newsletter
Ihr PMK-Verlags-Newsletter hier >>>>>>



Meldungen: Unternehmen

  • Technische Security-Services aus einer Hand

    Syntax, global agierende IT-Dienstleisterin und Managed Cloud Provider, wird im aktuellen "Provider Lens Quadrant Report Cybersecurity - Solutions and Services" von ISG in den Kategorien Technical Security Services und Managed Security Services als Product Challenger gelistet, dessen Services die Anforderungen von Unternehmen überdurchschnittlich gut abdecken.

  • Qualität und Erfahrung mit der Cloud

    Digitalisierung, Cloud Computing oder digitale Transformation müssen heute in den Unternehmen umgesetzt werden, das gesamte Digitalisierungsspektrum gilt es, voranzutreiben. Doch die Umsetzung intelligenter, digitaler Lösungen erfordern tiefes Technologieverständnis.

  • IBM Consulting wird VMware GSI

    Auf der VMware Explore 2022 haben IBM und VMware den Ausbau ihrer 20-jährigen Partnerschaft angekündigt. IBM wird zum ersten VMware-Partner, der gemeinsam entwickelte Lösungen anbietet. IBM Consulting ist nun auch als zertifizierter VMware GSI-Partner etabliert und bietet die erforderliche Branchenexpertise, um Kunden, insbesondere in regulierten Branchen, über alle Clouds hinweg zu unterstützen.

  • Bereich Cloud-Migration ausgebaut

    Die NTT Data Business Solutions AG, SAP-Beraterin für den Mittelstand, übernimmt die Mehrheit des international agierenden digitalen Umzugsunternehmens Natuvion, Walldorf. Natuvion ist ein weltweit anerkannter SAP Data Transformation Partner und wird künftig weiterhin als eigenständige Marke auftreten.

  • Netzwerk und Sicherheit für die Multi-Cloud

    VMware gab mehrere Innovationen für sein wachsendes Netzwerk- und Sicherheitsportfolio bekannt, die Kunden bei der Einführung des Cloud-Betriebsmodells unterstützen - darunter: >> Projekt Northstar für Multi-Cloud-Netzwerke, Sicherheit und End-to-End-Transparenz >> Ausweitung der Netzwerkerkennung und -transparenz auf die Endpunktschutzplattform Carbon Black Cloud, auf die ab sofort ein früher Zugriff möglich ist >> Project Trinidad, das die API-Sicherheit und -Analyse von VMware erweitert und verbessert >> Project Watch, ein neuer Ansatz für Multi-Cloud-Netzwerke und -Sicherheit, der erweiterte App-to-App-Policy-Kontrollen bietet.

  • Anbieter von Zutrittskontrollsoftware

    Genetec, Anbieterin für vereinheitlichtes Sicherheitsmanagement, öffentliche Sicherheit und Business Intelligence, ist weiterhin weltweiter Marktführer für Videoüberwachungssoftware. Das gehe laut Genetec aus dem aktuellen Omdia Report 2022 hervor.

  • Cloud-Native-Angriffe in der Produktion

    Aqua Security hat eine Garantie für Cloud Native Security vorgestellt. Kunden, die Aquas "Cloud Native Application Protection Platform" (CNAPP), unter Berücksichtigung der Best Practices, vollständig implementiert haben und trotzdem Opfer eines Cloud-Native-Angriffs werden, erhalten bis zu 1 Million US-Dollar Schadenersatz.

  • Cloud Computing Compliance Criteria Catalogue

    Zscaler erhielt ihre Compliance mit den Anforderungen des C5-Katalogs des Bundesamts für die Informationssicherheit (BSI) für die Cloud-Infrastruktur mit ihren 150 globalen Rechenzentren von einem unabhängigen Auditor bestätigt.

  • Einführung von Hybrid Cloud Observability

    SolarWinds gibt bekannt, dass ihre Observability-Plattform in aktuellen "GigaOm Radar-Berichten" besonders hervorgehoben wurde. Die Hybrid Cloud Observability-Lösung von SolarWinds, die eine ganzheitliche Sicht auf die verteilten und hybriden Netzwerkumgebungen von heute bietet, sowie andere Observability-Produkte wurden für die Verbesserung bei Transparenz, Einblicken und Produktivität im Unternehmen ausgezeichnet.

  • Zuverlässige Cloud Computing-Services

    Deloitte China und Alibaba Cloud, die Cloud Computing-Geschäftseinheit der Alibaba Group, haben gemeinsam das Deloitte-Alibaba Cloud Auto Industry Center gegründet. Das Kompetenzzentrum wird sich darauf konzentrieren, Kunden in der Automobilindustrie End-to-End-Lösungen anzubieten, einschließlich autonomem Fahren, intelligenter Fertigung und digitalem Marketing.

Wir verwenden Cookies um unsere Website zu optimieren und Ihnen das bestmögliche Online-Erlebnis zu bieten. Mit dem Klick auf "Alle akzeptieren" erklären Sie sich damit einverstanden. Erweiterte Einstellungen