OpenAI, Google, Microsoft va Anthropic sunʼiy intellektni oʻqitishga qoʻyiladigan umumiy taqiqni qoʻllab-quvvatlaydi

Hozirgi vaqtda sayt har bir kompaniyaning robotlari yoki tokenlari uchun qoidalarni alohida-alohida yozib chiqishiga toʻgʻri keladi: OpenAI uchun bu GPTBot, Anthropic uchun — ClaudeBot, Google uchun esa Google-Extended. Yangi mexanizm ularning oʻrnini bitta qoida bilan almashtiradi: «User-agent: __usage_ai-training» va «Disallow: /» satrlari butun resursni oʻqitish uchun yopadi, biroq alohida boʻlimlarni ham cheklash mumkin. Taklifni Anthropic xodimi Kevin Kelli tayyorlab, IETFʼga yubordi. Hozircha bu standart maqomiga ega boʻlmagan individual qoralama hisoblanadi, AIPREF ishchi guruhidagi muhokamalar davom etmoqda.

Kompaniyalarning muddatlari turlicha. Kod.ru havola qilayotgan IT Home maʼlumotlariga koʻra, Anthropic allaqachon joriy etishga kirishgan; OpenAI esa qoʻllab-quvvatlashni yaqin oylarda qoʻshmoqchi. Microsoft sozlamalarni 2027-yil 1-fevraldan boshlab, saytlarni takroriy koʻzdan kechirish jarayonida bosqichma-bosqich qoʻllashni boshlaydi, Google buni 2027-yil davomida amalga oshirishni rejalashtirmoqda. Agar Google-Extended uchun alohida qoidalar boʻlmasa, umumiy taqiq unga ham tatbiq etiladi, biroq Google-Extendedʼning oʻz sozlamalari ustuvorligini saqlab qoladi.

Microsoft, shuningdek, oʻqitish jarayonini Bing va Copilot javoblarini generatsiya qilishda materiallardan foydalanishdan ajratdi. Bunday foydalanish metateg yoki HTTP-sarlavha orqali taqiqlanadi, bunda sahifalar Bingʼning odatiy qidiruvida qoladi. Kompaniya ogohlantirishicha, taqiq saytning SI javoblaridagi ishtirokini va ushbu servislardan kelishi mumkin boʻlgan trafikni kamaytiradi. Sayt egasining koʻrsatmalari boʻlmagan taqdirda, Microsoft ikkala variantni ham maqbul deb hisoblaydi.

Meta vakili Endi Stoun umumiy signal gʻoyasini qoʻllab-quvvatladi, biroq joriy etish rejalari haqida xabar bermadi. Yangi direktivalar sayt egasining xohish-istagini bildiradi va nusxalashdan texnik jihatdan himoya qilmaydi: ularga rioya etilishi kompaniyalarning oʻziga bogʻliq.