Wie Open Table Formats die Logik moderner Datenplattformen verändernLakehouse-Architekturen mit offenen Standards wie Iceberg und Delta Lake schaffen die Basis für KI, Analytics und modernes Datenmanagement.
Graph trifft Lakehouse: Praxisbericht zur analytischen ArchitekturWelser Profile integriert Daten aus SAP, MySQL und SQL Server ins Databricks-Lakehouse. Eine Graphdatenbank ergänzt Analysen entlang des Produktlebenszyklus.
Databricks will ETL zwischen Datenbanken und Analytics überflüssig machenLTAP heißt die neue Architektur von Databricks, mit der operative Datenbanken und analytische Systeme nur noch eine gemeinsame Datenbasis benötigen sollen.
Airbyte 2.0: Datenintegration bis zu sechsmal schnellerDie Open-Source-Plattform Airbyte erscheint in Version 2.0 mit deutlich höherer Sync-Geschwindigkeit, Data Activation und einem hybriden Enterprise-Ansatz.
KI-Update Deep-Dive: Urheberrecht im Zeitalter der generativen KIDer Rechtsexperte Tim W. Dornis spricht über die rechtlichen Grauzonen beim Training von KI-Modellen.
Urheberrecht: Penguin Random House will Buchautoren vor KI-Ausbeutung schützenDer weltgrößte Fachverlag hat seine Copyright-Hinweise überarbeitet. Er will verhindern, dass die Schöpfungen der Autoren fürs KI- Training missbraucht werden.
Flexiblere Datenintegration mit der Open-Source-Plattform Airbyte 1.0Airbyte extrahiert Daten aus unterschiedlichen Quellen und APIs und führt sie in einer zentralen Plattform zusammen – darunter nun auch Vektordatenbanken.
iX-Workshop: MS Fabric – Einstieg in die All-in-One-Datenanalyse-PlattformMit MS Fabric Elemente von Power BI, Azure Synapse und Azure Data Factory in einer nahtlos integrierten Cloud-Umgebung verwenden. (10% Rabatt bis 27.08.)
Buchbesprechung: DuckDB in ActionDaten aus diversen Quellen verarbeiten, mit SQL analysieren und das Ergebnis in diversen Formaten exportieren – das Buch "DuckDB in Action" zeigt, wie’s geht.
Buchbesprechung: Deciphering Data ArchitecturesDas von James Serra bei O'Reilly neu erschienene Lehrbuch erläutert Schlüsselkonzepte und Datenarchitekturen von Big Data.
Data Lakes: Universalformat soll die Daten-Kompatibilität vereinfachenMit Delta Lake 3.0 führt Databricks UniForm ein. Das Universalformat erweitert den Datenzugriff um die Formate Apache Iceberg und Apache Hudi.
Datenintegration: Apache Hop 2.4 unterstützt DuckDB und Skripte in ECMAScriptVersion 2.4 der Datenintegrationsplattform Apache Hop unterstützt DuckDB und bietet eine neue JSR-223-Skripttransformation.
Wenn der Manager den kompletten Datenüberblick braucht: SAP startet DatasphereSAP stellt mit Datasphere die nächste Generation seines Portfolios fürs Datenmanagement vor. Es soll Zugriff und Nutzung von Daten aller Systeme vereinfachen.
data2day 2023: Vorträge zur zehnten Ausgabe der Data-Science-Konferenz gesuchtDer Call for Proposals zur Konferenz für Data Scientists, Data Engineers und Data Teams ist eröffnet. Die data2day findet 2023 wieder in Karlsruhe statt.
Data Lakes: Databricks bindet VS Code und dbt-Projekte nahtlos einMit Databricks Workflows lassen sich Datentransformationsprojekte organisieren und Entwickler erhalten über VS Code direkten Zugriff auf Databricks-Cluster.
BI und Data Mining: CfP zum Business Analytics Day 2023 gestartetFür den Business Analytics Day 2023 suchen die Organisatoren im Rahmen des Call for Presentations noch bis zum 15. März Beiträge zu BI und Data Mining.
FOSDEM 2023: Künstliche Intelligenz und Open Source SoftwareAm Wochenende treffen sich in Brüssel wieder tausende Open-Source-Enthusiasten zur jährlichen FOSDEM. Die Themen KI und Machine Learning nehmen viel Platz ein.
"Targeting": Palantir unterstützt die Ukraine bei der KriegsführungDie Ukraine überwacht feindliche Truppenbewegungen mit Palantir. Die Datenanalysesoftware helfe etwa bei der Ausrichtung von Panzern und Artillerie.
Gefälschte Profile: Meta verklagt Voyager Labs wegen massenhafter DatenausleseDer US-Konzern wirft der Überwachungsfirma Voyager Labs vor, gefälschte Accounts genutzt zu haben, um öffentlich einsehbare Daten massenweise auszuspähen.
Data-Pipelines als Managed Service: Y42 eröffnet DataOps CloudProduktionsreife Datenpipelines und umfassende Governance verspricht der vollständig verwaltete DataOps-Dienst von Y42, der auf Snowflake und BigQuery aufsetzt.
Open-Source-Datenanalyse: Apache Iceberg erreicht Version 1.0Die Version 1.0 des Open-Source-Projekts Apache Iceberg bietet nicht nur mehr Stabilität bei den APIs, sondern nun auch einen Standard-REST-API-Katalog.
Datenanalyse: Oracle springt auf den Lakehouse-Zug aufDer neue Cloud-Service MySQL HeatWave Lakehouse von Oracle zielt auf das hochperformante Laden und Analysieren großer Datenmengen.
