Metadata Amazon S3 (Pratinjau)

Di CMT, kami menyimpan dan menganalisis beberapa petabyte data dari perangkat IoT seluler di seluruh dunia untuk meningkatkan keamanan pengemudi dan jalan. Dengan makin bertambahnya skala, menemukan data spesifik untuk mengembangkan wawasan dan model baru menjadi makin menantang. Metadata S3, khususnya kemampuan metadata kustomnya, memungkinkan kita untuk membuat anotasi semua data kita dan memelihara metadata dalam tabel yang dikelola dan dapat dikueri. Sekarang, menemukan data yang relevan hanya membutuhkan satu kueri SQL yang efisien dan hemat biaya. Hal ini menjadikan S3 Metadata sebagai pengubah permainan, yang memungkinkan kami menghadirkan kemampuan baru kepada pelanggan kami.

S3 Metadata memberi kami mekanisme sederhana dan mudah untuk menganalisis triliunan objek S3 menggunakan alat standar, seperti Amazon Athena dan Amazon QuickSight. Dengan fungsi ini, kami dapat menghabiskan waktu untuk membuat keputusan, bukan membangun saluran data kompleks untuk mengakses dan melakukan kueri metadata objek S3.

S3 Metadata mempercepat inisiatif AI generatif kami. Saat kami membangun aplikasi LLM, seperti chatbot internal untuk tim kami, data tidak terstruktur, seperti PDF menjadi semakin berharga. Kami perlu menyerap banyak dokumen khusus domain ke aplikasi Retrieval Augmented Generation (RAG) sehingga chatbot dapat menyesuaikan dengan konteks bisnis spesifik Roche. Namun, ini juga berarti bahwa kami memiliki makin banyak data tidak terstruktur yang perlu dikelola. Kami membutuhkan sistem metadata untuk menggambarkan data tidak terstruktur secara efisien sehingga pengguna dapat dengan cepat menyaring melalui danau data besar kami untuk mengidentifikasi set data yang relevan untuk aplikasi AI generatif tertentu yang mereka bangun. Dengan Metadata S3, membangun sistem metadata yang kuat telah disederhanakan dengan beberapa klik di Konsol Manajemen AWS. Saat kami terus menyerap lebih banyak data tidak terstruktur, Metadata S3 secara otomatis menampilkan metadata dan menjaga metadata tetap mutakhir. Kami juga menggunakan Lambda kami sendiri untuk mengekstrak metadata khusus bisnis, seperti mengklasifikasikan dokumen berdasarkan taksonomi yang relevan dengan Roche, dan menyimpan metadata ini dalam katalog lem yang sama di samping tabel Metadata S3 sehingga dengan gabungan SQL sederhana, kami dapat memiliki semua metadata yang dibutuhkan. S3 Metadata membantu kami membangun aplikasi AI generatif lebih cepat, yang memungkinkan kami untuk fokus membangun daripada mengatur data.

Bayangkan menerbangkan mesin waktu melalui data Amazon S3 Anda. Di SmugMug and Flickr, kami telah menyimpan lebih dari 22 tahun foto pelanggan kami, ratusan miliar objek, di S3. Fitur Metadata S3 yang baru membantu kami menjelajahi metadata objek S3 dengan mudah dan terjangkau, menanyakan metadata, seperti ukuran objek dari waktu ke waktu untuk memahami bagaimana data kami telah berevolusi, yang sebelumnya melibatkan penggabungan kueri basis data mahal dengan inventaris objek. Memahami bagaimana fotografer kami menggunakan penyimpanan membantu meningkatkan komitmen kami untuk membangun dunia yang lebih baik melalui kekuatan fotografi.

Solink memproses lebih dari 500 juta jam video setiap bulan, yang mengintegrasikan rekaman keamanan dengan data bisnis penting dari lebih dari 350 sumber. AWS mendukung infrastruktur yang kami andalkan dan Amazon S3 Metadata akan membawanya lebih lanjut, memberikan wawasan waktu nyata yang meningkatkan manajemen konten kami, mulai dari memantau penyimpanan dan penggunaan hingga melacak efek waktu nyata dari perubahan konfigurasi pelanggan.

Amazon S3 telah muncul sebagai penyedia penyimpanan cloud terkemuka untuk berbagai jenis data. Amazon S3 Metadata akan memungkinkan vendor, seperti Commvault untuk secara proaktif membantu mengidentifikasi dan melindungi informasi sensitif sekaligus membantu mengotomatiskan elemen, seperti penataan data dan meningkatkan hasil untuk pelanggan bersama kami. S3 Metadata memfasilitasi organisasi data yang efisien dan membantu merampingkan penemuan data, memungkinkan anotasi objek secara terperinci, yang sangat penting untuk ketahanan siber yang mengutamakan cloud.

Sebagai pemimpin dalam observabilitas, mesin data New Relic memproses sekitar 1,3 exabyte data Amazon S3 setiap hari. S3 Metadata akan mempercepat inovasi kami dengan secara otomatis menghasilkan metadata objek yang kaya, sehingga menyederhanakan eksplorasi data yang dibutuhkan oleh tim kami untuk menjalankan eksperimen produk dan membangun bukti konsep, seperti mengembangkan metrik baru yang bermanfaat bagi pelanggan. S3 Metadata akan meringankan upaya kami untuk membangun dan memelihara sistem metadata yang tangguh dari ratusan jam menjadi hanya beberapa klik di Konsol Manajemen S3, sehingga teknisi kami dapat berfokus pada analisis data, bukan organisasi data.