media Hugging Face Forums · 2 hari lalu · open_models

NewTypeCola merilis dataset VOKU Archive Korea seluas 66.010 halaman

Diterjemahkan dari English → Bahasa Indonesia

NewTypeCola telah menerbitkan VOKU Archive di Hugging Face, sebuah koleksi 66.010 halaman yang dipindai dari cue sheets siaran radio kampus yang dijalankan oleh mahasiswa di Korea Selatan. Dokumen-dokumen tersebut mencakup periode 1988 hingga 2019 dan menyertakan teks OCR, anotasi token pseudonim, dan metadata.

Dataset ini melestarikan 32 tahun tulisan dari stasiun radio universitas.
Berisi gambar halaman, teks yang diproses, dan metadata terstruktur.
Repositori GitHub pendamping mendetailkan alur kerja pemrosesan bantuan AI dan langkah-langkah peninjauan manusia.

Proyek ini bertujuan agar dokumen-dokumen bersejarah ini tetap dapat dibaca dan diakses di luar penyimpanan aslinya.

Kepentingan 1/3 Kepercayaan 1/3 Hugging Face Forums Open weights Training data

Baca aslinya

vldmrbesk merilis arsip Tsiolkovsky berisi 51 ribu lembar dengan akurasi pengenalan terukur

Arsip pribadi lengkap Konstantin Tsiolkovsky, yang terdiri dari 51.008 lembar dan 2.019 file arsip, telah dirilis sebagai dataset CC0. Koleksi ini mencakup lima puluh tahun karya sang teoretikus roket autodidak dan mencakup naskah tulisan tangan bersama salinan ketikan.

media r/LocalLLaMA · 68 hari lalu · 60 tayangan

Hugging Face merilis The Stack v3, dataset kode terbuka terbesar

Hugging Face telah merilis The Stack v3, yang digambarkan sebagai dataset kode terbuka terbesar hingga saat ini. Rilis ini menyediakan dua metode akses berbeda untuk mengakomodasi kebutuhan pengguna yang beragam.

lab IBM Research (Granite) · 76 hari lalu · 34 tayangan

IBM membuka sumber CodeAlchemy, dataset sintetis masif berisi kode berkualitas tinggi

IBM telah membuka sumber CodeAlchemy, sebuah pipeline dan dataset sintetis yang dirancang untuk meningkatkan kinerja model AI dengan memasangkan kode bersama jejak eksekusi. Rilis ini mencakup hampir 1 triliun token di 15 bahasa pemrograman, totalnya setidaknya 200 kali ukuran Wikipedia.

arxiv arXiv cs.CL · 88 hari lalu · 31 tayangan

MultiSynt/MT merilis korpus paralel 4,8T token di 36 bahasa

Para peneliti memperkenalkan MultiSynt/MT, sebuah korpus paralel sintetis terbuka yang berisi sekitar 4,8 triliun token bahasa target di 36 bahasa Eropa. Dataset ini dihasilkan dengan menerjemahkan 100 miliar token Nemotron-CC berkualitas tinggi menggunakan sistem Tower+ dan OPUS-MT/HPLT-MT.

blog Simon Willison · 89 hari lalu · 26 tayangan

Current AI meluncurkan Peta Kesenjangan AI Open Source v0.1 dengan 421 produk terindeks

Current AI, organisasi nirlaba yang didirikan pada AI Action Summit pada Februari 2025, telah meluncurkan Peta Kesenjangan AI Open Source v0.1 untuk mengindeks keadaan AI open source.