Beli Kripto
Bayar dengan
USD
USD
Beli & Jual
Hot
Mendukung Visa, Mastercard, SEPA, dll.
P2P
0 Fees
Perdagangan fleksibel, nol biaya
Gate Card
Gunakan kripto untuk pembayaran global
Market
Perdagangan
Dasar
Lanjutan
Futures
Futures
Akses ribuan kontrak perpetual
CFD
Emas
Satu platform aset tradisional global
Opsi
Hot
Perdagangkan Opsi Vanilla ala Eropa
Akun Terpadu
Memaksimalkan efisiensi modal Anda
Perdagangan Demo
Pengantar tentang Perdagangan Futures
Bersiap untuk perdagangan futures Anda
Acara Futures
Gabung acara & dapatkan hadiah
Perdagangan Demo
Gunakan dana virtual untuk merasakan perdagangan bebas risiko
Stocks
CFD
Derivatif CFD Saham AS
Saham AS
Akses saham AS dan ETF yang nyata
Saham HK
Perdagangkan saham berkualitas yang terdaftar di Hong Kong
Saham Korea
SK Hynix
Perdagangkan Saham Korea Nyata dan Berinvestasi pada Aset Populer
Saham Futures
Leverage tinggi, perdagangan 24/7
Tokenized Stocks
Didukung oleh aset saham nyata
IPO Access
Buka akses penuh ke IPO saham global
GUSD
Mint GUSD untuk Imbal Hasil Treasury RWA
Aktivitas Saham
Perdagangkan Saham Populer dan Dapatkan Airdrop yang Melimpah
Earn
Peluncuran
CandyDrop
Koleksi permen untuk mendapatkan airdrop
Launchpool
Staking cepat, dapatkan token baru yang potensial
HODLer Airdrop
Pegang GT dan dapatkan airdrop besar secara gratis
IPO Access
Buka akses penuh ke IPO saham global
Poin Alpha
Perdagangkan aset on-chain, raih airdrop
Poin Futures
Dapatkan poin futures dan klaim hadiah airdrop
Investasi
Square
Kotak
Temukan nilai dalam kripto
Live
moments live
Analisis live pasar kripto
Chat
Mengobrol dengan trader kripto
Berita
Apa yang terjadi di kripto
flower_head
Lainnya
Promosi
AI
Lainnya
TradFi
2026 World Cup
Hadiah
Square
Terbaru
Populer
Berita
Profil

Arsitektur TwoTower dari NVIDIA Meningkatkan Efisiensi Model Besar dengan Model 30B Paralel

AirdropBlackHole
Menurut pemantauan oleh Beating, NVIDIA telah merilis arsitektur difusi teks diskrit Nemotron-Labs-TwoTower secara open-source, yang bertujuan untuk mengatasi hambatan kecepatan generasi model besar yang hanya dapat menghasilkan satu kata dalam satu waktu. Model difusi teks sebelumnya memaksa satu jaringan untuk menyeimbangkan pemahaman konteks satu arah dengan koreksi kesalahan paralel dua arah demi mengejar output paralel, yang mengakibatkan penurunan signifikan dalam kemampuan kognitif model. Arsitektur TwoTower menggunakan desain yang terpisah: di satu sisi, ia sepenuhnya membekukan model besar autoregresif yang telah dilatih sebelumnya sebagai 'menara konteks hanya-baca' untuk mempertahankan kemampuan penalaran dan akal sehat yang lengkap; di sisi lain, ia melatih secara terpisah 'menara penulisan denoising' yang membaca informasi kontekstual melalui perhatian silang di tingkat lapisan. Menara penulisan menggunakan mekanisme 'pembukaan topeng keyakinan', yang memprioritaskan penulisan kata-kata dengan keyakinan tinggi saat memprediksi blok, dan secara bertahap mengisi celah yang tersisa untuk mencapai penulisan paralel dari yang mudah ke yang sulit. Desain ini beradaptasi pada model arsitektur campuran tingkat 30B (Mamba-Transformer MoE) hanya menggunakan 1/12 data pra-pelatihan model dasar (2,1T token), mempertahankan 98,7% kualitas sambil meningkatkan kecepatan generasi aktual sebesar 2,42 kali, tanpa menambah overhead cache memori tambahan. Namun, karena perlu menyimpan kedua menara di memori, penggunaan memori statis model telah meningkat, dan masih ada sedikit penurunan akurasi dalam penalaran kode dan matematika yang sangat kompleks.
Lihat Asli
Halaman ini mungkin berisi konten pihak ketiga, yang disediakan untuk tujuan informasi saja (bukan pernyataan/jaminan) dan tidak boleh dianggap sebagai dukungan terhadap pandangannya oleh Gate, atau sebagai nasihat keuangan atau profesional. Lihat Penafian untuk detailnya.
  • Hadiah
  • Komentar
  • Posting ulang
  • Bagikan
Komentar
Tambahkan komentar
Tambahkan komentar
Tidak ada komentar

  • Disematkan

peta situs