San Francisco, (ANTARA/PRNewswire)- Common Crawl Foundation adalah organisasi nirlaba yang didirikan pada tahun 2007 dan khusus menyediakan salinan internet untuk publik. Constellation Network adalah ekosistem blockchain Web3 yang terkenal dengan penyediaan solusi untuk Departemen Pertahanan A.S. Hari ini mereka mengumumkan kemitraan strategis untuk menyediakan dan meningkatkan aksesibilitas maupun penggunaan web-crawled data pada teknologi blockchain bagi kecerdasan buatan (AI) dan aplikasi data.
Kerja sama ini akan mengeksplorasi berbagai kemungkinan peluang untuk meningkatkan Large Language Model yang digunakan oleh AI, dimulai dari sejumlah besar kumpulan data Common Crawl yang digunakan oleh 80% Large Language Model, yang melakukan crawling pada lebih dari 250 miliar halaman web hingga saat ini (19 miliar pada tahun 2024 saja), dan terdiri dari arsip berisi hampir 9 petabyte crawled data yang diarsipkan. Dengan memanfaatkan Hypergraph, jaringan terdesentralisasi milik Constellation, untuk menambahkan imutabilitas, provenance, dan kemampuan audit data, kemitraan ini bersama-sama memberikan solusi AI yang bertanggung jawab dan transparan.
AI diperkirakan menjadi industri senilai $3 triliun pada tahun 2030. Karena itu, semakin banyak permintaan solusi yang aman untuk berbagi kumpulan data bersama yang digunakan bagi pelatihan Large Language Model, meningkatkan penyimpanan data yang diminta dan dibersihkan, peluang monetisasi data, dan meningkatkan transparansi dengan sumber data. Dengan pendekatan Constellation yang unik dalam menyediakan alat untuk menyatukan infrastruktur yang ada dengan jaringan terdistribusi dan terdesentralisasi, serta sejarah data dan pertumbuhan penggunaan data Common Crawl, kemitraan ini sepakat untuk menyediakan data lebih lanjut.
"Kemitraan ini merupakan kemajuan signifikan untuk mendapatkan distribusi tepercaya Common Crawl," kata Rich Skrenta, Executive Director Common Crawl Foundation. "Dengan menggabungkan arsip web kami yang lengkap dengan implementasi teknologi blockchain Constellation yang telah terbukti, peneliti dan pengembang dari seluruh dunia dapat mempercayai apa yang mereka dapatkan dari Common Crawl dan memiliki model untuk mengotentikasi sejumlah besar kumpulan data terbuka, seperti yang digunakan untuk pelatihan AI".
Kata Ben Jorgensen, CEO Constellation Network, "Kemitraan Constellation Network dan Common Crawl menyoroti penggunaan utama solusi web3 di luar ruang gema (echo chamber) kripto. Penyelarasan ini melanjutkan misi Constellation, yaitu agar jaringan zero trust kami digunakan sebagai barang publik untuk masa depan yang berfokus pada data." Jorgensen melanjutkan, "Kami ingin lebih menarik pengembang baru dengan menampilkan berbagai kemampuan, misalnya mengintegrasikan imutabilitas di seluruh alur kerja digital, sehingga dengan demikian akan semakin membedakan kami dari generasi teknologi blockchain sebelumnya."
Kedua organisasi ini akan memulai pendekatan bertahap untuk menerapkan inisiatif tersebut, dimulai dari subnet yang dapat disesuaikan, yaitu metagram, yang akan mengintegrasikan subset data Common Crawl. Subnet ini sudah aktif di jaringan uji coba mereka dan akan segera digunakan di jaringan publik Hypergraph milik Constellation. Rincian lebih lanjut tentang metafora live akan ditampilkan dalam beberapa minggu mendatang bersama informasi tentang bagaimana organisasi dan pengembang dapat berpartisipasi.
Untuk informasi lebih lanjut, harap kunjungi:
- Common Crawl Foundation: https://commoncrawl.org
- Constellation Network: https://constellationnetwork.io
- X.com @Conste11ation
Tentang Common Crawl Foundation
Common Crawl Foundation adalah organisasi nirlaba 501(c)(3) yang khusus menyediakan salinan internet tanpa biaya kepada publik. Arsip web mereka terdiri dari petabyte data yang dikumpulkan melalui web crawling selama bertahun-tahun, yang berfungsi sebagai sumber daya penting bagi peneliti, bisnis, dan pengembang di seluruh dunia.
Tentang Constellation Network
Constellation Network adalah ekosistem blockchain Web3 yang menjembatani ekonomi kripto dengan bisnis tradisional. Jaringan andalannya, Hypergraph, menyediakan solusi untuk transaksi yang cepat, terukur, dan tanpa biaya. Constellation Network divalidasi oleh Departemen Pertahanan A.S. yang telah menjadi pelanggannya sejak tahun 2019.
Catatan: Siaran pers ini berisi pernyataan berpandangan ke depan. Hasil sebenarnya mungkin berbeda secara material dari yang diperkirakan.
