{"id":656,"date":"2022-03-24T14:05:40","date_gmt":"2022-03-24T13:05:40","guid":{"rendered":"https:\/\/avantgarde-labs.com\/?post_type=case_studies&p=656"},"modified":"2022-06-22T10:03:51","modified_gmt":"2022-06-22T08:03:51","slug":"ganzheitliche-datenbereitstellung-bei-conrad","status":"publish","type":"case_studies","link":"https:\/\/avantgarde-labs.com\/de\/case-studies\/ganzheitliche-datenbereitstellung-bei-conrad\/","title":{"rendered":"Ganzheitliche Datenversorgung bei Conrad"},"content":{"rendered":"\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

Herausforderung<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Conrad Electronic vertreibt vorwiegend Artikel aus dem Bereich Elektronik und Technik. \u00dcber seine digitale Beschaffungsplattform versucht das Unternehmen den gesamten technischen Betriebsbedarf seiner Gesch\u00e4ftskunden abzudecken. Mit mehr als 6 Millionen Produktangeboten von \u00fcber 4.500 Herstellern, von einzelnen Ersatzteilen bis hin zu hohen St\u00fcckzahlen.<\/span><\/p>

Die Verarbeitung der Conrad eigenen rund 700.000 Artikel<\/strong> in Full Batches dauerte damals bereits bis zu 24 Stunden<\/strong>. F\u00fcr wichtige Marketingaktionen und der Anforderung, sofort auf juristische Themen im Shop reagieren zu k\u00f6nnen, war diese Zeitspanne bereits viel zu lang.\u00a0<\/span><\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t

\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Das zus\u00e4tzliche Ziel, einen neuen Marktplatz mit \u00fcber 7 Millionen Artikeln auf der Plattform zu releasen, w\u00fcrde noch dazu eine <\/span>Verzehnfachung der bereits bestehenden<\/b> Datenverarbeitungsprozesse mit sich ziehen.\u00a0<\/span><\/p>

Aus damaliger Sicht <\/span>fehlten<\/b> Conrad f\u00fcr eine <\/span>Verarbeitung der enormen Datenlast<\/b> (\u00fcber 500 Gigabyte) die entsprechenden <\/span>Produktdaten-Prozesse<\/b>, um neue Produkte und Updates von Produktinformationen im PIM oder ERP schnellstm\u00f6glich, sicher und standardisiert in allen Kan\u00e4len ver\u00f6ffentlichen zu k\u00f6nnen.\u00a0<\/span><\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t

\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t

L\u00f6sung durch Avantgarde Labs<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Bei Conrad war f\u00fcr die Datenintegration auf der Commerce Plattform die Enterprise L\u00f6sung von Talend im Einsatz. Die fachliche Komplexit\u00e4t war jedoch in mehr als 100 ETL-Job-Logiken abgebildet. Die Sicherstellung der Kontinuit\u00e4t in der Datenversorgung erforderte vom Data-Services-Team von Conrad eine 24\/7 Bereitschaft und intensive Wartungsarbeiten.<\/span><\/p>

Nach ausf\u00fchrlicher Analyse der Ist-Situation entschied sich das Data-Service-Team von Conrad zusammen mit dem ETL-Entwickler-Team von Avantgarde Labs f\u00fcr 4 nachhaltige Anpassungen in Conrad\u2019s Produktdaten-Logistik:<\/strong><\/span><\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t

\n\t\t\t\t
\n\t\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t
  • \n\t\t\t\t\t\t\t\t\t\t\t\n\t\t\t\t\t\t\t<\/i>\t\t\t\t\t\t<\/span>\n\t\t\t\t\t\t\t\t\t\t\u00dcberf\u00fchrung der bisherigen Batch-Prozesse in eine Delta-Verarbeitungslogik<\/span>\n\t\t\t\t\t\t\t\t\t<\/li>\n\t\t\t\t\t\t\t\t
  • \n\t\t\t\t\t\t\t\t\t\t\t\n\t\t\t\t\t\t\t<\/i>\t\t\t\t\t\t<\/span>\n\t\t\t\t\t\t\t\t\t\tEinf\u00fchrung einer horizontalen Skalierungs-Strategie in der Cloud<\/span>\n\t\t\t\t\t\t\t\t\t<\/li>\n\t\t\t\t\t\t<\/ul>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t
    \n\t\t\t
    \n\t\t\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t
    • \n\t\t\t\t\t\t\t\t\t\t\t\n\t\t\t\t\t\t\t<\/i>\t\t\t\t\t\t<\/span>\n\t\t\t\t\t\t\t\t\t\tAufbau einer internen Datendrehscheibe<\/span>\n\t\t\t\t\t\t\t\t\t<\/li>\n\t\t\t\t\t\t\t\t
    • \n\t\t\t\t\t\t\t\t\t\t\t\n\t\t\t\t\t\t\t<\/i>\t\t\t\t\t\t<\/span>\n\t\t\t\t\t\t\t\t\t\tAusbau des Monitorings und Einf\u00fchrung automatischer Wartungsservices<\/span>\n\t\t\t\t\t\t\t\t\t<\/li>\n\t\t\t\t\t\t<\/ul>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
      \n\t\t\t\t
      \n\t\t\t\t\t\t\t\t\t

      Trotz einer <\/span>Verzehnfachung der Datenmenge<\/b> konnte die Zeit zur Prozessierung der Produktdaten <\/span>um 85% reduziert werden<\/b>. Die L\u00f6sung basierte auf einer Delta-Prozessierungslogik<\/strong> in Talend und der horizontalen Skalierung innerhalb der Google Cloud Plattform. Durch ein dediziertes Monitoring<\/strong> der Prozesse konnte nun priorisiert auf Fehler reagiert werden, um eine stabile Datenversorgung f\u00fcr Shop, Marktplatz und externe Kan\u00e4le sicherzustellen.<\/span><\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t

      \n\t\t\t\t\t\t
      \n\t\t\t\t\t
      \n\t\t\t
      \n\t\t\t\t\t\t
      \n\t\t\t\t
      \n\t\t\t\t\t

      Projektergebnis & Kundennutzen<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
      \n\t\t\t\t\t\t
      \n\t\t\t\t\t
      \n\t\t\t
      \n\t\t\t\t\t\t
      \n\t\t\t\t
      \n\t\t\t\t\t\t\t\t\t

      Die Delta-Prozessierung in Verbindung mit der horizontalen Skalierung in der Google Cloud erm\u00f6glicht eine <\/span>sichere und vollautomatisierte Bereitstellung<\/b> von mehr als 7 Millionen Produktdaten f\u00fcr Shop, Marktplatz und externe Anwender, bei einer <\/span>Aktualisierungsrate<\/b> neuer Artikel von\u00a0nur bis zu einer Stunde.<\/b><\/span><\/p>

      Hardware Ressourcen werden nur bei Bedarf in Anspruch genommen. Die durchschnittliche Last der Google Compute Engines betr\u00e4gt mind. 50 Prozent und f\u00fchrt damit zu einer <\/span>hohen Kosteneffizienz<\/b> der eingesetzten Hardware.\u00a0<\/span><\/p>

      Durch die tempor\u00e4re Skalierung wurden <\/span>stabile Betriebszeiten<\/b> in der Datenversorgung erreicht. Sollten dennoch \u00dcberlastungen auftreten, k\u00f6nnen diese <\/span>fr\u00fchzeitig <\/b>durch das erweiterte Monitoring erkannt werden. Je nach Priorit\u00e4t schreitet das Data-Services-Team ein und sichert damit den laufenden Betrieb.\u00a0<\/span><\/p>

      Durch die Bereitstellung vieler bedarfsgerechter Sichten auf die Produktdaten reduziert das Data-Services-Team als Resultat die aufwendige Datenverarbeitung anderer Konsumenten. Die Nachnutzung <\/span>spart unternehmensweit Ressourcen<\/b> und gew\u00e4hrleistet die <\/span>Datenkonsistenz <\/b>\u00fcber die vertikalen Team-Grenzen.<\/span><\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t

      \n\t\t\t
      \n\t\t\t\t\t\t
      \n\t\t\t\t
      \n\t\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t
      \u00bbAvantgarde Labs hat uns sehr dabei geholfen, unsere Datenprozesse schneller, skalierbarer und stabiler zu machen, um den Herausforderungen des schnell wachsenden Datenvolumens und dem erh\u00f6hten Bedarf an aktuellen Daten gerecht zu werden. Sie haben uns bei der Planung, Implementierung und auch im Betrieb unterst\u00fctzt. Dadurch ist Conrad in der Lage, den Kunden unserer Plattform weiterhin die besten Dienstleistungen anzubieten.\u00ab<\/div>\n\t\t\t\n\t\t\t\t\t\t
      \n\t\t\t\t
      \n\t\t\t\t\t\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t\"\"\t\t\t\t\t\t<\/div>\n\t\t\t\t\t\n\t\t\t\t\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t\t\t\t\t\t\t\t
      Markus Wiesinger<\/div>\n\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t\t
      Senior Expert DataService Engineer
      Conrad Electronic SE<\/div>\n\t\t\t\t\t\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t\t\t\t\t<\/div>\n\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<\/div>\n\t\t","protected":false},"excerpt":{"rendered":"

      Konsistente und sichere Datenversorgung im Multichannel-E-Commerce – Conrads cloudbasierte ETL-Prozesse<\/p>\n","protected":false},"author":1,"featured_media":0,"parent":0,"template":"","meta":{"_acf_changed":false,"site-sidebar-layout":"no-sidebar","site-content-layout":"page-builder","ast-site-content-layout":"default","site-content-style":"default","site-sidebar-style":"default","ast-global-header-display":"","ast-banner-title-visibility":"","ast-main-header-display":"","ast-hfb-above-header-display":"","ast-hfb-below-header-display":"","ast-hfb-mobile-header-display":"","site-post-title":"disabled","ast-breadcrumbs-content":"","ast-featured-img":"disabled","footer-sml-layout":"","ast-disable-related-posts":"","theme-transparent-header-meta":"default","adv-header-id-meta":"","stick-header-meta":"default","header-above-stick-meta":"","header-main-stick-meta":"","header-below-stick-meta":"","astra-migrate-meta-layouts":"default","ast-page-background-enabled":"default","ast-page-background-meta":{"desktop":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"ast-content-background-meta":{"desktop":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"footnotes":""},"branche":[4],"solutions":[63,62],"cooperations":[25],"services":[18,60],"teams":[61],"class_list":["post-656","case_studies","type-case_studies","status-publish","hentry","branche-handel","solutions-datenmanagement-im-ecommerce","solutions-multichannel-integration","cooperations-time-material","services-application-development","services-data-management","teams-etl-entwickler"],"acf":[],"_links":{"self":[{"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/case_studies\/656","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/case_studies"}],"about":[{"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/types\/case_studies"}],"author":[{"embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/users\/1"}],"version-history":[{"count":53,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/case_studies\/656\/revisions"}],"predecessor-version":[{"id":8567,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/case_studies\/656\/revisions\/8567"}],"wp:attachment":[{"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/media?parent=656"}],"wp:term":[{"taxonomy":"branche","embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/branche?post=656"},{"taxonomy":"solutions","embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/solutions?post=656"},{"taxonomy":"cooperations","embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/cooperations?post=656"},{"taxonomy":"services","embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/services?post=656"},{"taxonomy":"teams","embeddable":true,"href":"https:\/\/avantgarde-labs.com\/de\/wp-json\/wp\/v2\/teams?post=656"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}