Speicherklasse Amazon S3 Intelligent-Tiering

Stripe ist ein Technologieunternehmen, das eine wirtschaftliche Infrastruktur für das Internet aufbaut. Unternehmen jeder Größe – von neuen Startups bis hin zu öffentlichen Unternehmen – nutzen die Stripe-Software, um Zahlungen anzunehmen und ihre Geschäfte online zu verwalten.

„Seit der Einführung von S3 Intelligent-Tiering im Jahr 2018 haben wir automatisch rund 30 % unserer Speicherkosten pro Monat eingespart, ohne die Leistung zu beeinträchtigen oder unsere Daten analysieren zu müssen. Mit der neuen Zugriffsebene Archive Instant Access gehen wir davon aus, dass wir die Vorteile der Preisgestaltung für Archivspeicher automatisch nutzen und gleichzeitig die Möglichkeit haben, bei Bedarf sofort auf unsere Daten zuzugreifen.“

Kalyana Chadalavada, Head of Efficiency – Stripe

GRAIL ist ein Gesundheitsunternehmen, das sich darauf konzentriert, Leben zu retten und die Gesundheit zu verbessern, indem es Pionierarbeit bei neuen Technologien zur Krebsfrüherkennung leistet. GRAIL hat eine multidisziplinäre Organisation von Wissenschaftlern, Ingenieuren und Ärzten aufgebaut. Sie nutzen die Möglichkeiten der Sequenzierung der nächsten Generation, klinische Studien auf Populationsebene und modernste Informatik und Datenwissenschaft, um eine der größten Herausforderungen der Medizin zu bewältigen.

„Wir haben die meisten unserer Daten auf S3 Intelligent-Tiering umgestellt, was zu Einsparungen von 40 % pro Gigabyte an Speicherkosten geführt hat.“

Olga Ignatova, Director of Software Development – GRAIL

CineSend ist ein führender Anbieter von cloudbasierten Medienressourcen-Management-Tools für die Film- und Fernsehindustrie. CineSend bietet ein Portfolio an sofort einsatzbereiten und maßgeschneiderten Softwarelösungen für Studios, unabhängige Produzenten und Filmverleiher zur Verwaltung von Workflows zur Bereitstellung von Premium-Medieninhalten.

„Der Einsatz von S3 Intelligent-Tiering ermöglichte es uns, ein 'Setzen-und-Vergessen'-Modell für gespeicherte Medieninhalte zu verwenden. In der Gewissheit, dass häufig und selten aufgerufene Dateien in der richtigen Speicherklasse verweilen und dass die Kosten auf ein Minimum beschränkt werden, kann sich mein Team auf unser Mandat konzentrieren: sichere Videoinhalte auf der ganzen Welt mit modernster Technologie bereitzustellen.“

D'Arcy Rail-Ip, VP Technology – CineSend

Zalando wurde 2008 gegründet und ist Europas führende Online-Plattform für Mode und Lifestyle mit über 32 Millionen aktiven Kunden. Amazon S3 ist der Eckpfeiler der Dateninfrastruktur von Zalando, und sie haben S3-Speicherklassen verwendet, um die Speicherkosten zu optimieren.

„Wir sparen jährlich 37 % an Speicherkosten, indem wir Amazon S3 Intelligent-Tiering verwenden, um Objekte, die innerhalb von 30 Tagen nicht angefasst wurden, automatisch in die Ebene mit seltenem Zugriff zu verschieben.“

Max Schultze, Lead Data Engineer – Zalando

Amazon Photos bietet Amazon-Prime-Mitgliedern in acht Onlineshops weltweit unbegrenzten Fotospeicher und 5 GB Videospeicher. Kunden nutzen die Mobil-, Web- und Desktop-Apps von Amazon Photos, um ihre Erinnerungen zu sicher, zu betrachten und zu teilen, und erleben diese Erinnerungen auf Amazon-Smartscreen-Geräten wie Amazon Echo Show und Amazon Fire TV noch einmal.

„Seit der Einführung von Amazon Photos verwenden wir Amazon S3. S3 Standard Storage konnte zwar mit der Größe unseres Unternehmens wachsen, aber die Notwendigkeit, Kosten und Leistung eines großen (und wachsenden) Datenvolumens zu optimieren, stellte eine Herausforderung dar. Mit der Einführung von S3 Intelligent-Tiering im Jahr 2018 und der kürzlich hinzugefügten Zugriffsebene Archive Instant Access von S3 Intelligent-Tiering war das Amazon-Photos-Team in der Lage, sofort eine AWS-Lösung mit minimalen bis gar keinen Änderungen an unseren bestehenden Services zu nutzen und konnte so über 10 % der Speicherkosten einsparen.“

Arun Kumar Agarwal, Software Development Manager – Amazon Photos
Stacie Buckingham, Senior Software Development Manager – Amazon Photos

Teespring, eine Online-Plattform, die es Kreativen ermöglicht, einzigartige Ideen in kundenspezifische Waren zu verwandeln, erlebte ein rasantes Geschäftswachstum, und auch die Daten des Unternehmens wuchsen exponentiell (auf ein Petabyte) und nahmen weiter zu. Wie viele andere cloud-native Unternehmen löste Teespring das Problem durch die Verwendung von AWS, insbesondere durch die Speicherung von Daten auf Amazon S3. 

Durch den Einsatz von S3 Intelligent-Tiering spart Teespring jetzt mehr als 30 % seiner monatlichen Speicherkosten.

Der deutsche Live-Streaming-Service Joyn GmbH, ein Joint Venture von ProSiebenSat.1 und Discovery, nutzt seinen umfangreichen Inhaltsspeicher, um Abonnenten zur Unterhaltung exklusive, hyperlokale Serien und Filme aus der Vergangenheit anzubieten. Um dies zu ermöglichen, hat Joyn kürzlich mithilfe von 40 AWS-Snowball-Geräten in weniger als drei Monaten über 3 Petabytes (PB) an Medienarchiven von einer On-Premises-Einrichtung in Amazon S3 übertragen.

Durch den Einsatz von Amazon S3 Intelligent-Tiering kann Joyn all seine Inhalte online halten und den Speicher automatisch optimieren, wenn sich die Zugriffsmuster ändern – ohne die Leistung oder den Betriebsaufwand zu beeinträchtigen. Inhalte aus dem Archiv, die auf großes Interesse stoßen, werden in einer Ebene mit häufigem Zugriff sortiert, während Inhalte, die weniger Aufmerksamkeit erregen, in einer Ebene mit seltenem Zugriff gespeichert werden.

„Früher mussten wir selektiv entscheiden, welche Inhalte wir aus unserem Deep Archive abrufen oder in einigen Fällen, was wir im Archiv behalten würden, aber jetzt ist das ein Kinderspiel. Durch den Einsatz von S3 Intelligent-Tiering konnten wir unser Speichervolumen bei gleichen Gesamtbetriebskosten (TCO) um das Dreifache erhöhen. Es ist großartig, nicht mehr über das Löschen von Inhalten nachdenken zu müssen, um Speicherplatz zu schaffen, und wenn die Inhalte inaktiv sind, befinden sie sich auf einer Ebene mit seltenem Zugriff oder Archivierung.“

Stefan Haufe, Media Engineer – Joyn

Mithilfe von AWS verwaltet SimilarWeb große Datenmengen, auf deren Grundlage seine Datenwissenschaftler Algorithmen zur Verbesserung seiner Marktintelligenz-Plattform entwickeln. Durch den Einsatz von S3 Intelligent-Tiering ist SimilarWeb in der Lage, diese Daten für seine Mitarbeiter zu demokratisieren und 20 % der Speicherkosten einzusparen.

AppsFlyer ist eine führende Plattform für die Zuordnung mobiler Werbung und Marketinganalyse. AppsFlyer speichert die Daten seiner 100 Milliarden Ereignisse pro Tag in einem Data Lake im Petabyte-Bereich in Amazon S3. Sie hatten jedoch wenig Einsicht, ob Objekte, die älter als 365 Tage sind, in Zukunft wieder häufig abgerufen werden und dadurch unerwartete Abrufkosten anfallen würden. AppsFlyer benötigte eine andere Lösung und fand sie in S3 Intelligent-Tiering.

AppsFlyer konnte eine fundierte Entscheidung treffen, Daten auf S3 Intelligent-Tiering umzustellen, was zu einer Kostenreduzierung von 18 % pro gespeichertem GB führte. Die Kostensenkung ist für AppsFlyer wichtig, da sie zur Umsatzsteigerung beiträgt und es AppsFlyer ermöglicht, in neue Workloads zu investieren.

„S3 Intelligent-Tiering ermöglicht uns eine bessere Nutzung und höhere Kosteneffizienz, wenn wir zu historischen Daten greifen und zusätzlich Änderungen vornehmen müssen.“

Reshef Mann, CTO und Mitbegründer – AppsFlyer

Capital One ist seit 1994 ein Vorreiter in der Finanzdienstleistungsbranche und nutzt Technologien zur Transformation des Bankwesens und des Zahlungsverkehrs. Heute setzt die „digitale Bank“ auf AWS und umfasst Datenanalysen, Microservices, KI/ML und andere Lösungen, um weiterhin innovativ zu sein.

„Wir wollten einen Weg finden, die Speicherkosten für die größten und am schnellsten wachsenden Buckets im gesamten Unternehmen schnell zu optimieren. Da die Muster der Speichernutzung in unseren Top-Buckets sehr unterschiedlich sind, gab es keine klare Regel, die wir sicher anwenden könnten, ohne einen gewissen betrieblichen Aufwand zu übernehmen. Die Speicherklasse S3 Intelligent-Tiering ermöglichte automatische Speichereinsparungen auf der Grundlage der sich ändernden Zugriffsmuster unserer Daten, ohne die Leistung zu beeinträchtigen. Wir freuen uns auf die neue Zugriffsebene Archive Instant Access von S3 Intelligent-Tiering, mit der wir ohne zusätzlichen Aufwand noch größere Einsparungen erzielen können.“

Jerzy Grzywinski, Director of Software Engineering – Capital One

Mobileye führt die Mobilitätsrevolution mit seinen Technologien für autonomes Fahren und Fahrerassistenz an und nutzt dabei weltbekanntes Fachwissen in den Bereichen Computer Vision, Machine Learning, Kartierung und Datenanalyse.

„Wir verwenden Amazon S3 Intelligent-Tiering, da Zugriffsmuster oft unvorhersehbar sind. Mit der neuen Zugriffsebene Archive Instant Access von S3 Intelligent-Tiering werden wir die Kosten für viele Petabytes an autonomen Fahrzeugdaten weiter senken und sie gleichzeitig für unsere Entwickler sofort verfügbar halten.“

Yanor Barros, Director of Cloud Infrastructure Development – Mobileye

Epic Games ist das interaktive Unterhaltungsunternehmen hinter Fortnite, einem der beliebtesten Videospiele der Welt mit über 400 Millionen Spielern. Epic wurde 1991 gegründet und hat das Gaming mit der Veröffentlichung von Unreal Engine revolutioniert – der 3D-Erstellungs-Engine, die Hunderte von Spielen unterstützt, die heute in verschiedenen Branchen wie der Automobilindustrie, Film und Fernsehen sowie Simulation für die Produktion in Echtzeit eingesetzt werden. 

„Mit S3 Intelligent-Tiering können wir Speicheränderungen vornehmen, ohne dass Service und Aktivität unterbrochen werden. Unsere Daten werden je nach Datenzugriff automatisch in kostengünstigere Ebenen verschoben, wodurch wir viel Entwicklungszeit sparen und die Kosten senken. In dieser Zeit kann sich mein Team darauf konzentrieren, andere Möglichkeiten zur Senkung der Infrastrukturkosten zur Unterstützung unserer Unternehmensziele zu identifizieren. Die neue Zugriffsebene Archive Instant Access von S3 Intelligent-Tiering wird uns helfen, noch mehr Speicherkosten einzusparen.“

Joshua Bergen, Cost Management Lead – Epic Games

Embark entwickelt Technologie für selbstfahrende Lkw, um die Straßen sicherer zu machen und die Effizienz des Transports zu verbessern. Als die COVID-19-Pandemie ausbrach, beschloss Embark, den Lkw-Betrieb einzustellen, um der sozialen Verantwortung gegenüber der öffentlichen Gesundheit gerecht zu werden und die Sicherheit seiner Belegschaft zu gewährleisten. Embark nutzte seine Petabytes an historischen Daten in Amazon S3 und entwickelte Systeme, die es dem Unternehmen ermöglichen, diese besser zu nutzen. 

Die Engineers begannen, aus jahrelang gesammelten historischen Daten zu schöpfen und Tausende von Stunden an Fahrdaten zu durchforsten, um interessante Szenarien zu finden. Sie nutzten diese Daten, um aussagekräftigere Simulationen zu erstellen, anhand derer sie ihr System testen konnten. Da alle Daten von Embark in der S3-Intelligent-Tiering-Speicherklasse gespeichert wurden, musste Embark keine Zeit damit verbringen, darüber nachzudenken, welche Daten verfügbar sein sollten und wie diese Daten zwischen verschiedenen Speicherebenen verschoben werden sollten, um die Kosten zu optimieren und gleichzeitig dieses plötzliche Muster zufälligen Datenzugriffs auf seinen Data Lake zu ermöglichen. 

S3 Intelligent-Tiering hat die gesamte Arbeit zur Kostenoptimierung für sie übernommen, sodass ihr Team all seine technischen Anstrengungen auf den Aufbau besserer Datenleitungen und Simulationssysteme konzentrieren konnte. Mithilfe von AWS war das Team von Embark in der Lage, sich schnell an die Herausforderungen der Pandemie anzupassen, und als die Pause aufgehoben wurde, konnte es sich weiterhin darauf konzentrieren, die Sicherheits- und Effizienzvorteile selbstfahrender Lkw zu nutzen.