Blog

Entwicklung des MLflow 2.0 mit MLflow Recipes von Databricks

Aleksander Fegel · 17. November 2023 · 2 Min. Lesezeit

Datenplattform

Entwicklung des MLflow 2.0 mit MLflow Recipes von Databricks

Ailio

Ein Jahr mit MLflow 2.0 und MLflow Recipes: Fortschritt und Innovation bei Databricks

Ein Jahr nach der Einführung von MLflow 2.0 mit MLflow Recipes hat sich Databricks‘ Angebot als einflussreiche Entwicklung in der Welt des Machine Learnings etabliert. Ursprünglich vorgestellt im Dezember 2022, hat Databricks, bekannt für seine auf Apache Spark basierende Delta-Lake-Plattform, seine Technologie wesentlich erweitert und die Fortschritte der Linux Foundation zugänglich gemacht. Zu den Hauptneuerungen gehören MLflow Pipelines und MLflow Recipes, die als Vorlagen für automatisierte Machine-Learning-Projekte dienen.

Die Evolution der Databricks-Technologie: Delta Lake 2.0 und Cloud-Integration

Die Lakehouse-Architektur „Delta Lake 2.0“ von Databricks, beschrieben von CEO Ali Ghodsi, bietet eine hochleistungsfähige Analyseplattform, die sowohl strukturierte als auch unstrukturierte Daten in jedem Bereitstellungsmodell verarbeiten kann, von On-Premises bis hin zu Multi-Cloud-Umgebungen. Die Integration mit Public Cloud-Services wie AWS S3 hat sich weiter vertieft.

MLflow als De-facto-Standard in MLOps: Downloads und Managed Services

MLflow, mit monatlich 13 Millionen Downloads, hat sich als Standard für MLOps etabliert. Auch als Managed Service bietet MLflow maximale Zuverlässigkeit und Skalierbarkeit, integriert in die Databricks Machine Learning Runtime, den Databricks Feature Store und Serverless Real-Time Inference.

Beschleunigung der ML-Modellentwicklung: Die Bedeutung von MLflow Recipes

Die Erweiterungen von MLflow 2.0, insbesondere MLflow Recipes, haben die Entwicklung von Machine-Learning-Modellen beschleunigt. Mit vordefinierten Lösungsrezepten können ML-Experten schnell mit ihrer Arbeit beginnen, durch die Recipes-Ausführungs-Engine effizienter iterieren und robuste Modelle einfacher in die Produktion überführen. Zu den Neuerungen gehören Features wie AutoML, Hyperparameter-Tuning und verbessertes Data Profiling.

AutoML und MLflow: Automatisierung und Effizienz in der Machine-Learning-Landschaft

AutoML identifiziert automatisch passende Modelle für spezifische ML-Aufgaben und unterstützt Data Scientists mit Leistungskennzahlen und Parametern für eingehenderes Tuning und Iteration. Alle Ergebnisse werden in Machine Learning Flow Tracking festgehalten, um reproduzierbare Referenzen zu schaffen.

Benutzererfahrung und Produktivitätssteigerung durch MLflow-Core-Verbesserungen

Die Benutzerfreundlichkeit des MLflow-Cores wurde auf Basis von Nutzerfeedback verbessert, um die Produktivität von Data Scientists zu erhöhen. Jeder MLflow-Run erhält einen einzigartigen Namen, was das Identifizieren der besten Ergebnisse vereinfacht. Erweiterte Suchfilter in MLflow erleichtern die Suche nach Läufen und Experimenten.

Neue Dimensionen in TensorFlow und Keras Integration mit MLflow 2.0

Die überarbeitete Integration mit TensorFlow und Keras in MLflow 2.0 bietet eine einheitliche Schnittstelle für Logging und Scoring. Die mlflow.evaluate() API generiert Leistungsberichte und Erklärbarkeit für jedes mit MLflow erstellte Modell.

Praxisanwendung von MLflow bei Mercedes: Effizienzsteigerung in der Fahrzeugdiagnostik

Ein praktisches Beispiel für die Anwendung von MLflow ist Mercedes, das die Fehleranalyse bei Fahrzeugen von Tagen auf Stunden reduziert hat. Die Technologie ist Teil der MO360 Data Platform, einer Zusammenarbeit mit Microsoft, und bietet digitale Dienste wie optimierte Routenvorhersagen für E-Ladesäulen.

Sie wollen diese Themen angehen?

Die Ailio GmbH ist ein auf Data-Science und Künstliche Intelligenz spezialisierter Dienstleister aus Bielefeld. Wir beraten in beiden Bereichen und entfesseln das Potential der Daten, die momentan im deutschen Mittelstand brach liegen. Dabei gehen wir kostenoptimierend und risikominimierend vor. Bei Interesse kontaktieren Sie uns gerne direkt!

Mit uns Innovationsprojekt planen!

Datenplattform & Lakehouse

Ein Datenfundament, auf dem KI und Analytics wirklich tragen.

Databricks oder Fabric, Medallion-Architektur, Governance und Betrieb: Wir bauen deine Datenplattform so, dass der erste produktive Use-Case nicht Jahre, sondern Wochen entfernt ist.

  • Databricks- & Microsoft-Fabric-Expertise
  • Governance, Qualität und Kosten von Anfang an im Griff
  • Plattform und erster Use-Case parallel statt nacheinander

Weitere Artikel

Data & AI

Digitale Vorreiter im KI-Wettlauf: Warum skalierbare Operationalisierung noch der Schlüssel zum Erfolg ist

Ailio

AI in der Praxis: Warum digitale Vorreiter bei der skalierbaren KI noch Nachholbedarf haben Die Integration künstlicher Intelligenz in Unternehmen ist eine der zentralen Herausforderungen der heutigen Wirtschaft. Eine neue internationale Studie des Economist zum Thema „Making AI deliver: A benchmarking framework on how leading companies operationalise AI for impact“ bietet spannende Einblicke: Insbesondere digitale […]

Data & AI

Klartext zur KI-Skalierung: Warum traditionelle Unternehmen bei der Operationalisierung vor Digital Natives liegen

Ailio

Klartext zur KI-Skalierung: Warum Digital Natives ambitioniert sind, aber traditionelle Unternehmen beim Operationalisieren vorne liegen Künstliche Intelligenz (KI) und Data Science sind längst keine Zukunftsmusik mehr – sie prägen heute zahlreiche Geschäftsmodelle. Vor allem digitale Vorreiter-Unternehmen, die sogenannten „Digital Natives“, setzen sich ambitionierte Ziele beim KI-Einsatz. Doch eine aktuelle, branchenübergreifende Studie des Economist zeigt: Obwohl […]

Data & AI

Wie digitale Vorreiter KI skalieren – und warum traditionelle Branchen bei der nachhaltigen Operationalisierung oft erfolgreicher sind

Ailio

Wie digitale Vorreiter KI skalieren – und warum traditionelle Branchen oft weiter sind Im Zuge der beschleunigten KI-Transformation stellt sich für viele Unternehmen nicht mehr die Frage, ob, sondern wie Künstliche Intelligenz effizient und skalierbar im eigenen Unternehmen verankert werden kann. Eine aktuelle, branchenübergreifende Erhebung unter mehr als 1.200 internationalen Führungskräften zeigt spannend: Während digitale […]