Setelah upgrade Dencun, bagaimana masalah penyimpanan dan akses data historis Ethereum dalam jangka panjang dapat diatasi?

Masalah dan Solusi Pemuaian Data Status Ethereum

Dengan popularitas dan peningkatan permintaan aplikasi jaringan Ethereum, data status historisnya mulai berkembang dengan cepat. Untuk mengatasi masalah ini, Ethereum telah melakukan perbaikan secara bertahap, mulai dari Full Node awal, kemudian ke light client, dan baru-baru ini dengan upgrade Dencun yang memperkenalkan fitur status kadaluarsa untuk membersihkan data yang tidak digunakan dalam jangka waktu lama secara otomatis.

Salah satu tujuan jangka panjang Ethereum adalah untuk mengurangi beban dari satu rantai blok dengan mendistribusikan data ke berbagai rantai blok melalui implementasi Sharding. EIP-4844 yang diterapkan dalam upgrade Dencun merupakan langkah penting bagi jaringan Ethereum menuju implementasi penuh Sharding. EIP-4844 memperkenalkan tipe data sementara ‘blobs’, yang memungkinkan Rollup untuk mengirimkan lebih banyak data ke rantai utama Ethereum dengan biaya yang lebih rendah. Untuk mengendalikan pembengkakan data status, Ethereum akan menghapus data blobs dari node konsensus setelah disimpan selama sekitar 18 hari.

Selain perbaikan yang dilakukan oleh Ethereum itu sendiri, beberapa proyek seperti Celestia, Avail, dan EigenDA sedang membangun solusi untuk meningkatkan masalah data. Mereka menyediakan solusi Ketersediaan Data (DA) jangka pendek yang efektif, meningkatkan operasi waktu nyata dan skalabilitas blockchain. Namun, solusi-solusi ini belum memecahkan masalah aplikasi yang membutuhkan akses data historis jangka panjang, seperti dApp yang bergantung pada penyimpanan data otentikasi pengguna jangka panjang atau dApp yang memerlukan pelatihan model kecerdasan buatan.

Untuk mengatasi tantangan penyimpanan data jangka panjang dalam ekosistem Ethereum, proyek-proyek seperti EthStorage, Pinax, dan Covalent telah mengusulkan solusi. EthStorage menyediakan DA jangka panjang untuk Rollup, memastikan data dapat diakses dan digunakan dalam jangka panjang. Pinax, The Graph, dan StreamingFast bekerja sama untuk mengembangkan solusi penyimpanan dan pengambilan paket data blobs jangka panjang. Ethereum Wayback Machine (EWM) dari Covalent bukan hanya solusi penyimpanan data jangka panjang, tetapi juga sistem lengkap yang memungkinkan pencarian dan analisis data.

Dengan kecerdasan buatan menjadi tren utama dalam pengembangan teknologi global, integrasinya dengan teknologi blockchain juga dianggap sebagai arah perkembangan di masa depan. Tren ini menyebabkan permintaan akses dan analisis data historis terus meningkat. Dalam konteks ini, EWM menunjukkan keunggulannya yang unik. EWM menyediakan arsip data historis Ethereum dan pemrosesan data, memungkinkan pengguna untuk mengakses struktur data yang kompleks, menganalisis dan mengakses status internal smart contract, hasil transaksi, log kejadian, dan lainnya secara mendalam.

Pengenalan Ethereum Wayback Machine (EWM)

Ethereum Wayback Machine (EWM) mengadopsi konsep Wayback Machine, menyimpan data historis di atas Ethereum, dan memungkinkan akses dan verifikasi. Wayback Machine adalah proyek arsip digital yang dibuat oleh Internet Archive, bertujuan untuk merekam dan menyimpan sejarah internet. Alat ini memungkinkan pengguna melihat versi arsip situs web pada titik waktu tertentu di masa lalu, membantu orang memahami perubahan sejarah konten situs web.

Data historis adalah alasan mendasar lahirnya teknologi Blockchain, yang tidak hanya mendukung arsitektur teknis Blockchain, tetapi juga menjadi pondasi dari model ekonominya. Dalam desain awal Blockchain, tujuannya adalah untuk menyediakan catatan sejarah yang transparan dan tidak dapat diubah. Misalnya Bitcoin, diciptakan untuk menciptakan buku besar yang tidak dapat dimanipulasi dan terdesentralisasi, yang mencatat setiap transaksi untuk memastikan transparansi dan keamanan transaksi. Permintaan akan data historis sangat luas, tetapi saat ini masih kurangnya cara penyimpanan yang efisien dan dapat diverifikasi. EWM, sebagai solusi jangka panjang untuk DA, dapat menyimpan data secara permanen, termasuk data blob, dan dapat mengatasi masalah aksesibilitas data historis yang disebabkan oleh kejadian kadaluwarsa status dan pemecahan data. EWM berfokus pada pengarsipan dan aksesibilitas jangka panjang data historis di Ethereum, serta mendukung kueri struktur data yang kompleks. Selanjutnya, kami akan menjelajahi secara detail bagaimana EWM mencapai tujuan ini melalui proses pengolahan data yang unik.

Proses pengolahan data EWM: Ekstraksi, Pemurnian, dan Indeks

Covalent adalah platform yang menyediakan akses dan layanan kueri data blockchain untuk pengguna. Ini mencapai penyimpanan data yang dapat diandalkan dan akses cepat dengan menangkap dan mengindeks data blockchain, dan menyimpannya di beberapa node di jaringan. Covalent menggunakan Ethereum Wayback Machine (EWM) untuk memproses data, memastikan aksesibilitas data historis blockchain yang berkelanjutan. Proses pengolahan data EWM meliputi tiga langkah kunci: Ekstraksi dan Ekspor, Pemurnian, dan Penyusunan Indeks dan Kueri.

1. Ekstraksi dan Ekspor: Ini adalah langkah pertama dalam proses ini, melibatkan ekstraksi data transaksi historis langsung dari jaringan blockchain. Langkah ini dilakukan oleh entitas khusus yang disebut Produsen Sampel Blok (BSP). Tugas utama BSP adalah membuat dan menyimpan ‘sampel blok’, yaitu snapshot data blockchain yang asli. Sampel blok ini berfungsi sebagai representasi spesifikasi dari status historis blockchain, dengan menjaga integritas dan akurasi data. Setelah dibuat, sampel blok ini diunggah ke server terdistribusi (dibangun dengan basis IPFS) dan dipublikasikan dan diverifikasi melalui kontrak ProofChain. Hal ini tidak hanya memastikan keamanan data, tetapi juga memberikan sinyal kepada orang lain bahwa data telah disimpan dengan aman.
2. Pemurnian: Setelah data diekstraksi, data disempurnakan oleh Blok Results Producers (BRP). BRP bertanggung jawab untuk mengubah data yang mendasarinya menjadi bentuk yang lebih bermanfaat. Metode akses data Blockchain tradisional seringkali hanya memberikan informasi terbatas dan tidak mudah untuk menanyakan struktur data yang kompleks. Dengan mengeksekusi ulang dan mengubah data, BRP dapat memberikan informasi yang lebih rinci, seperti keadaan internal kontrak, jalur eksekusi transaksi, dll. Selain itu, BRP secara signifikan mengurangi kebutuhan untuk menjalankan kembali Node penuh dengan setiap kueri atau analisis data dengan melakukan prapemrosesan dan penyimpanan data yang diproses, meningkatkan kecepatan kueri dan Drop biaya penyimpanan dan komputasi. Pada titik ini, “Sampel Blok” asli diubah menjadi bentuk “Hasil Blok” yang lebih mudah untuk ditanyakan dan dianalisis. Proses ini tidak hanya mempercepat kinerja jaringan Covalent, tetapi juga memberikan lebih banyak kemungkinan long untuk kueri dan analisis data lebih lanjut.
3. Indeks dan Kueri: Operator kueri terakhir akan menyimpan data yang telah diolah dengan rapi di tempat yang mudah dicari. Data dapat diekstrak dari server terdistribusi sesuai dengan permintaan pengguna API, sehingga data historis dan real-time dapat digunakan untuk menanggapi kueri API. Dengan cara ini, pengguna dapat dengan efektif mengakses dan memanfaatkan data blockchain yang tersimpan di jaringan Covalent.

Covalent menyediakan API GoldRush yang terpadu, mendukung pengambilan data historis dari berbagai blockchain (seperti Ethereum, Polygon, Solana, dll). API GoldRush ini menyediakan solusi data yang lengkap bagi para pengembang, memungkinkan mereka untuk dengan mudah membangun dompet mata uang kripto dan NFT (seperti Rainbow, Zerion) dengan hanya satu panggilan untuk mendapatkan saldo token ERC20 dan data NFT dari akun. Hal ini sangat menyederhanakan proses pengembangan. Selain itu, akses ke data DA melalui API memerlukan penggunaan kredit poin (Credit), jenis permintaan yang berbeda dikategorikan menjadi kategori yang berbeda (Kategori A, Kategori B, Kategori C, dll), setiap kategori memiliki biaya kredit yang spesifik. Pendapatan ini digunakan untuk mendukung jaringan operator.

Pandangan Masa Depan

Dengan perkembangan cepat AI, tren kombinasi AI dan blockchain menjadi semakin jelas. Teknologi blockchain menyediakan sumber data yang tidak dapat diubah dan diverifikasi secara terdistribusi untuk AI, meningkatkan transparansi dan kepercayaan data, sehingga model AI dapat lebih akurat dan dapat diandalkan dalam analisis data dan pembuatan keputusan. Dengan menganalisis data on-chain, AI dapat mengoptimalkan algoritma dan memprediksi tren, sehingga dapat langsung menjalankan tugas dan transaksi kompleks, meningkatkan efisiensi dan menurunkan biaya dApp secara signifikan. Melalui EWM, model AI dapat mengakses kumpulan data Web3 terstruktur yang luas dan data tersebut memiliki integritas dan verifikasi yang dapat dipercaya. Sebagai jembatan antara model AI dan blockchain, EWM sangat memudahkan pengembang AI dalam mengakses dan memanfaatkan data.

Saat ini beberapa proyek AI telah mengintegrasikan Covalent:

• SmartWhales: Platform yang menggunakan teknologi AI untuk mengoptimalkan strategi investasi copy trading. Copy trading bergantung pada analisis data historis untuk mengidentifikasi pola dan strategi trading yang sukses. Covalent menyediakan kumpulan data blockchain yang komprehensif, dan SmartWhales menganalisis perilaku dan hasil transaksi masa lalu melalui data ini untuk mengidentifikasi strategi yang performanya baik dalam kondisi pasar tertentu dan merekomendasikannya kepada pengguna.
• BotFi: Robot perdagangan DeFi. Menganalisis tren pasar dan strategi perdagangan otomatis dengan mengintegrasikan data Covalent, dan secara otomatis melakukan transaksi jual-beli sesuai dengan perubahan pasar.
• Laika AI: Menggunakan kecerdasan buatan (AI) untuk melakukan analisis lengkap secara on-chain. Platform Laika AI menggunakan data blockchain terstruktur yang disediakan oleh Covalent untuk menggerakkan model AI-nya, membantu pengguna melakukan analisis data on-chain yang kompleks.
• Entendre Finance: Manajemen aset DeFi otomatis, memberikan wawasan dan analisis prediktif real-time. AI-nya menggunakan data terstruktur Covalent untuk menyederhanakan dan mengotomatisasi manajemen aset, seperti memantau dan mengelola kepemilikan aset digital, menjalankan strategi perdagangan tertentu secara otomatis, dll.

EWM juga terus diperbarui dan ditingkatkan seiring dengan perubahan permintaan. Insinyur Covalent, Pranay Valson, mengatakan bahwa EWM akan memperluas spesifikasi protokol untuk mendukung blockchain lain seperti Polygon dan Arbitrum, dan akan mengintegrasikan fork BSP ke klien Ethereum seperti Nethermind dan Besu untuk mencapai kompatibilitas dan aplikasi yang lebih luas. Selain itu, ketika EWM memproses transaksi blob di beacon chain, akan menggunakan komitmen KZG untuk meningkatkan efisiensi penyimpanan dan pengambilan data, serta mengurangi biaya penyimpanan.