PROBACA.COM – OpenAI, Google, Microsoft, dan Anthropic menyatakan akan mengadopsi standar baru yang memungkinkan penerbit memilih keluar dari scraping oleh AI. Dengan kontrol ini, penerbit dapat menerapkan preferensi pelatihan AI kepada beberapa perusahaan AI sekaligus, tanpa harus mengaturnya satu per satu.
Sinyal bersama yang disebut “token kebijakan” itu diusulkan Kevin Kelley, pemimpin teknis untuk bidang standar di Anthropic, sebagai bagian dari Internet Engineering Task Force (IETF). Sinyal tersebut akan ditempatkan di dalam file robots.txt sebuah situs.
File robots.txt selama ini digunakan untuk memberi tahu perayap web mana yang boleh dan tidak boleh mengakses sebuah situs, baik untuk pengindeksan mesin pencari, pengarsipan, maupun pelatihan AI. Saat ini, situs harus menyampaikan preferensi pelatihan AI secara terpisah kepada setiap perusahaan AI.
Pengumuman ini muncul ketika penerbit menghadapi arus perayap AI yang terus mengakses situs mereka dan memasukkan kontennya ke model AI. Sejumlah perusahaan dan organisasi telah mencoba mengatasi scraping tanpa izin. Standar Really Simple Licensing (RSL), misalnya, memberi penerbit kemampuan untuk mengenakan biaya kepada perayap yang mengunjungi situs mereka. Cloudflare juga memblokir perayap AI secara default.
OpenAI, Google, Microsoft, dan Anthropic menyatakan akan membatasi perayap AI mereka agar tidak mengakses situs jika menemukan token bersama tersebut.
Microsoft, bagaimanapun, akan menyediakan kontrol yang lebih terperinci. Penerbit dapat memilih keluar dari pelatihan AI atau AI grounding, yaitu proses mengarahkan model AI ke sumber informasi terverifikasi untuk mengurangi halusinasi. Microsoft mencatat bahwa situs tetap akan muncul dalam hasil pencarian Bing, apa pun preferensi yang dipilih penerbit.
Anthropic telah mengadopsi sinyal tersebut. Google dan Microsoft berencana mendukungnya tahun depan, sedangkan OpenAI menyatakan akan menerapkannya dalam “beberapa bulan mendatang”.
***
DISCLAIMER: Sebagian proses pengolahan artikel ini dibantu oleh teknologi AI. Pembaca disarankan memverifikasi kembali data dan informasi melalui sumber resmi atau sumber primer
Disadur dari Theverge
