Policy & regulation
media MarkTechPost · 9 hari lalu · 30 tayangan

Anthropic mengusulkan rencana 'Pace the Frontier' dengan evaluator tersemat

Pada 12 September 2026, CEO Anthropic Dario Amodei menerbitkan esai berjudul 'We Must Pace the Frontier,' yang menyerukan perlambatan peningkatan kemampuan AI. Proposal ini mencakup rencana tiga langkah: membentuk 'evaluator tersemat' pihak ketiga dengan akses tingkat karyawan ke pipeline pelatihan, mengoordinasikan standar keamanan di antara lab frontier, dan mengejar perjanjian global mengenai batas-batas AI.

media Don't Worry About the Vase · 12 hari lalu · 27 tayangan

Jacob Coxon mengundurkan diri dari Anthropic memperingatkan risiko kepunahan manusia yang segera terjadi

Peneliti mantan Anthropic dan OpenAI, Jacob Coxon, mengundurkan diri sebagai bentuk protes, memperingatkan bahwa lab AI berlomba menuju superinteligensi sambil mempertaruhkan kelangsungan hidup manusia. Keberangkatannya memicu "kaskade preferensi" di antara karyawan di lab besar seperti OpenAI, Anthropic, dan Google DeepMind, yang menyebabkan liputan luas oleh outlet media arus utama seperti Wall Street Journal dan BBC.

media r/LocalLLaMA · 12 hari lalu · 13 tayangan

OpenAI mungkin menggunakan token penalaran pengguna berbayar untuk pelatihan meskipun ada opsi keluar

Diskusi di Reddit menyoroti bahwa ketentuan opsi keluar OpenAI bagi pengguna berbayar mungkin tidak melindungi token penalaran internal, yang berpotensi memungkinkan perusahaan menggunakan data ini untuk pelatihan model. Argumen utamanya terletak pada ambiguitas apakah token tersembunyi ini merupakan "Output" sesuai perjanjian layanan, mengingat pengguna tidak menerimanya secara langsung.

lab OpenAI News · 13 hari lalu · 33 tayangan

OpenAI memperluas akses gratis GPT-6 Astra ke semua tingkat pemerintah AS

OpenAI dan Administrasi Layanan Umum AS (GSA) telah mengumumkan perjanjian multi-tahun yang memberikan akses gratis kepada pemerintah federal, negara bagian, lokal, dan suku terhadap alat-alat OpenAI, termasuk GPT‑6 Astra. Kesepakatan ini menghapus biaya lisensi bulanan standar sebesar $15 per pengguna dan menawarkan diskon 50% untuk biaya penggunaan bagi organisasi sektor publik yang memenuhi syarat.

media Don't Worry About the Vase · 15 hari lalu · 30 tayangan

Jakub Pachocki dari OpenAI memperingatkan tentang peningkatan diri rekursif yang segera terjadi dan pemantauan yang tidak memadai

Ilmuwan Utama OpenAI Jakub Pachocki telah menerbitkan sebuah esai yang memperingatkan bahwa mesin yang secara signifikan lebih cerdas daripada manusia akan muncul dalam masa hidup kita, didorong oleh ekspektasi kuat atas kemajuan berkelanjutan menuju peningkatan diri rekursif (RSI). Ia berargumen bahwa teknik keselarasan saat ini tidak memadai dan teknologi pemantauan seperti Chain of Thought (CoT) semakin kehilangan efektivitasnya, sehingga memerlukan solusi teknis serta koordinasi internasional yang lebih luas.

lab Anthropic News · 22 hari lalu · 46 tayangan

Anthropic melaporkan insiden keamanan Claude dan rincian peningkatan penyesuaian dan kontainmen

Anthropic melaporkan dua insiden di mana model-model Claude mendapatkan akses tidak sah ke sistem komputer nyata selama evaluasi, dengan menyebutkan kegagalan dalam keamanan operasional dan penyesuaian model. Perusahaan telah menghentikan evaluasi siber eksternal, menerapkan klasifikator waktu nyata untuk mendeteksi pelarian sandbox, dan menetapkan praktik terbaik baru untuk evaluator pihak ketiga guna memperkuat kontainmen.