Industrie: Softwareentwicklung
Verwendete JetBrains-Produkte: Datalore
Organisationsgröße: 100+
Land: Republik Korea
Als IT-Unternehmen, das sich auf die „Vernetzung von Geschäftschancen“ konzentriert, hat Drama & Company mit seiner Flagship-App Remember für frischen Wind in der Rekrutierungsbranche gesorgt. Mit über 4,5 Millionen aktiven Benutzer*innen in der Republik Korea ist Remember ein Beleg für den Anspruch des Unternehmens, auf Daten basierende Geschäftsmöglichkeiten zu nutzen.
Drama & Company verfügt über eine Fülle von Benutzerdaten aus verschiedenen Bereichen, darunter Visitenkarteninformationen, Stellenhistorien, Forschungszahlen und Werbungsstatistiken. Wenig überraschend brachte der Umgang mit solch umfangreichen Daten einige Herausforderungen mit sich.
„Beim Erstellen eines Accounts in der App geben die Benutzer*innen nur einige wenige persönliche Daten an. Um den anderen App-Benutzer*innen einen größeren Nutzen zu bieten, muss unser Team die Benutzerprofile um Daten aus anderen Quellen ergänzen. Daher benötigen wir einen schnellen und zuverlässigen Prozess für die Recherche, Verarbeitung, Optimierung und Bereitstellung von Daten.“
— Youngrae Lee, Leitung Big Data Center Team bei Drama & Company
Zuvor hatte Drama & Company einen separaten Jupyter-Server für seine Datenforschung verwendet. Bei diesem Setup kam es jedoch häufig zu Leistungsproblemen, insbesondere wenn einzelne Forschende umfangreiche Rechenressourcen benötigten. Die Übertragung der Forschungsergebnisse in eine Daten-Pipeline, die Verteilung des von den Forschenden geschriebenen Codes und ähnliche Aufgaben erwiesen sich als schwierig und zeitaufwändig.
Angesichts der Herausforderungen, mit denen das Unternehmen konfrontiert war, erkannte Drama & Company die Notwendigkeit einer robusteren und skalierbaren Data-Science-Plattform. Das Big Data Center Team bei Drama & Company hatte zwei zentrale Ziele. Erstens sollte die Qualität der Daten verbessert und ihr Umfang erweitert werden. Zweitens sollte die Datennutzung im gesamten Unternehmen ausgeweitet werden, um die Wettbewerbsfähigkeit zu stärken.
Die Erwartungen an die neue Data-Science-Plattform umfasste mehrere Aspekte:
Nach Prüfung verschiedener Optionen entschied sich Drama & Company für Datalore. Das Produkt ist als On-Premises-Installation mit SSO-Authentifizierung erhältlich, kann AWS-Datenquellen einbinden, bietet eine integrierte, benutzerfreundliche Notebook-Versionierung, Echtzeit-Zusammenarbeit in Notebooks und Team-Workspaces sowie eine Funktion für Hintergrundberechnungen, die es ermöglicht, Notebooks auch bei geschlossenem Browser auszuführen. Außerdem war JetBrains ein Anbieter, der bereits das Vertrauen von Drama & Company genoss.
Mithilfe von Datalore hat Drama & Company seine Datenforschungen und die Datenverwaltung optimiert. Zusammenarbeit spielt bei Drama & Company eine zentrale Rolle. Das Team besteht aus vier Gruppen: Data Planning & Engineering, Data Reliability Engineering, Biz Card und Data Platform Engineering. Jede Gruppe hat ihre eigene Rolle, aber sie arbeiten alle sehr eng zusammen.
„Dank der intuitiven Benutzeroberfläche und der robusten Funktionalität von Datalore können wir Datensammlungen mühelos erkunden und analysieren. Dies steigert die Produktivität und ermöglicht informierte Entscheidungen im gesamten Team.“
— Yeojin Kim, Data Engineer bei Drama & Company
Wichtige Datalore-Funktionen für Drama & Company:
Codefreie Datenkonnektoren für Amazon Glue, Athena, S3 und AuroraDB.
Kombinierte Nutzung von SQL und Python in einem Jupyter-Notebook.
Integrierte Versionierung.
Echtzeit-Zusammenarbeit und Teilen von Notebooks und Arbeitsbereichen.
On-Premises-Installation und SSO-Authentifizierung.
Zeitgesteuerte Notebook-Ausführung und Hintergrundberechnungen.
So sieht ein typischer Datalore-Workflow bei Drama & Company aus:
„Die codefreien Verbindungen zu Amazon Glue, Athena, S3 und AuroraDB sowie die Möglichkeit, SQL und Python in einem Notebook zu kombinieren, haben uns geholfen, den Ressourcenaufwand für das Abfragen, Verifizieren und Überarbeiten von Daten zu reduzieren und dadurch das Forschungstempo zu erhöhen.“
— Youngrae Lee, Leitung Big Data Center Team bei Drama & Company
Drittens führen die Forschenden ihre Codeanalyse in Datalore-Notebooks durch und übergeben ihre Ergebnisse für ein Code-Review an das Data-Engineering-Team. Gemeinsam mit den Forschenden nehmen Data Engineers bei Bedarf Echtzeitänderungen oder -korrekturen am Code vor. Dieser Ablauf dient auch als Lernerfahrung für die Forschenden, damit sie ihre Programmierung im Sinne einer effizienten Dateninfrastruktur verbessern können.
„Für das Team gehört es zu den größten Vorteilen von Datalore, dass Arbeitsvorgänge im Gegensatz zu Jupyter nicht angehalten werden, wenn der Browser geschlossen wird. Dies bedeutet, dass man den Arbeitsplatz beruhigt verlassen kann, wohl wissend, dass die zeitaufwändigen Notebook-Berechnungen im Hintergrund weiterlaufen.“
— Youngrae Lee, Leitung Big Data Center Team bei Drama & Company
Zentrale Vorteile:
50%
weniger Zeitaufwand für gemeinsame Aufgaben dank einer verbesserten Zusammenarbeit
80%
schnellere Bereitstellung von Analysen
Die Einführung von Datalore hat die Effizienz des Teams erheblich gesteigert. Vor allem die Zusammenarbeit zwischen den verschiedenen Untergruppen des Datenteams hat sich verbessert, sodass der Zeitaufwand für gemeinsame Aufgaben um über 50% reduziert werden konnte. Durch reibungslose Datenintegrationen, verbesserte Code-Reviews und schnellere Iterationszyklen wurde die Datenanalyse um 80% beschleunigt, was die Gesamtkapazität der Teammitglieder deutlich erhöht hat.
„Die Zusammenarbeit mit meinem Team ist dank Datalore wesentlich effizienter geworden. Die Plattform bietet eine herausragende Leistung beim Teilen und Analysieren von Daten und Code und ermöglicht so eine mühelose Zusammenarbeit und Reviews. Im Gegensatz zu unseren früheren Tools können wir mit Datalore die Notebooks in einzelne Arbeitsblätter aufteilen. Dank dieser Funktionalität können wir unterschiedliche Phasen der Datenverarbeitung in separaten Arbeitsblättern bearbeiten, was die Verständlichkeit und die Struktur unserer Analyseberichte erheblich verbessert.“
— Yeeun Im, Data Engineer bei Drama & Company
Drama & Company verfügt über eine Fülle von Benutzerdaten aus verschiedenen Bereichen, darunter Visitenkarteninformationen, Stellenhistorien, Forschungszahlen und Werbungsstatistiken. Wenig überraschend brachte der Umgang mit solch umfangreichen Daten einige Herausforderungen mit sich.
„Ich denke, viele Unternehmen haben die gleichen Anliegen wie wir. Ich hoffe, dass viele Unternehmen die Erfahrung machen werden, dass Datalore die Zusammenarbeit von der Analyse bis hin zur Datenentwicklung maximiert und vereinfacht, und dass sie ihr Know-how zahlreich teilen werden.“
— Youngrae Lee, Leitung Big Data Center Team bei Drama & Company
Nauman Hafiz, CTO von Constellation
Um seine Data-Science-Aktivitäten zu skalieren und sowohl Kund*innen als auch interne Beteiligte mit wertvollen Erkenntnissen zu versorgen, wollte Constellation die Zusammenarbeit vereinfachen und die Agilität steigern. Probleme wie die langsame Generierung von Berichten in herkömmlichen Business-Intelligence-Tools (speziell Power BI und Looker) sowie unzusammenhängende Workflows schränkten die Fähigkeit des Unternehmens ein, zeitnahe, individualisierte Erkenntnisse zu gewinnen.
Seongduk Cheon, Senior Manager bei LINE Corporation
Während des Evaluierungsprozesses stellten wir fest, dass die UX von Datalore unseren Entwickler*innen vertraut war und die Funktionalität zur gemeinsamen Nutzung von Berichten einfach zu bedienen war. Dank der Zusammenarbeit unseres Entwicklungsteams und des Datalore-Entwicklungsteams konnten wir unsere Anforderungen an den Workflow und die Data Governance erfüllen.
Regeane, Produktmanagerin, Ometria
Letztes Jahr hat unser Team mit Datalore einen entscheidenden Durchbruch erzielt. Wir haben die Leistungsfähigkeit des Produkts genutzt und unsere Retail-Intelligence-Services auf ein neues Niveau gehoben. Durch die Entwicklung interner Services und maßgeschneiderter Datenberichte stellte unser Customer-Success-Team blitzschnelle Erkenntnisse bereit, von denen unsere Kunden in hohem Maße profitierten. Diese Leistung war einer der größten Erfolge unseres Teams im vergangenen Jahr.