AI เว็บคลานบอทเป็นแมลงสาบของอินเทอร์เน็ตนักพัฒนาซอฟต์แวร์หลายคนเชื่อ นักพัฒนาบางคนเริ่มต่อสู้ด้วยวิธีที่น่าเบื่อหน่ายมักจะมีอารมณ์ขัน
ในขณะที่เว็บไซต์ใด ๆ อาจถูกกำหนดเป้าหมายโดยพฤติกรรมการรวบรวมข้อมูลที่ไม่ดี – บางครั้งการลงเว็บไซต์ – นักพัฒนาโอเพ่นซอร์สได้รับผลกระทบอย่างไม่เป็นสัดส่วน เขียน Niccolò Venerandi ผู้พัฒนาเดสก์ท็อป Linux ที่รู้จักกันในชื่อพลาสมาและเจ้าของบล็อก Librenews
ตามธรรมชาติของพวกเขาเว็บไซต์ที่เป็นเจ้าภาพโครงการฟรีและโอเพ่นซอร์ส (FOSS) แบ่งปันโครงสร้างพื้นฐานของพวกเขาในที่สาธารณะและพวกเขาก็มีแนวโน้มที่จะมีทรัพยากรน้อยกว่าผลิตภัณฑ์เชิงพาณิชย์
ปัญหาคือบอท AI จำนวนมากไม่ได้ให้เกียรติไฟล์โปรโตคอลการยกเว้นหุ่นยนต์ Robotic.txt เครื่องมือที่บอกบอทว่าจะไม่คลานอะไร แต่เดิมสร้างขึ้นสำหรับบอทเสิร์ชเอ็นจิ้น
ใน“ ร้องไห้เพื่อขอความช่วยเหลือ” โพสต์บล็อก ในเดือนมกราคมนักพัฒนา FOSS XE IAOE อธิบายว่า AmazonBot ทุบอย่างไม่หยุดยั้งบนเว็บไซต์ Git Server จนถึงจุดที่ทำให้เกิดการหยุดทำงานของ DDOS Git Servers เป็นเจ้าภาพโครงการ FOSS เพื่อให้ทุกคนที่ต้องการสามารถดาวน์โหลดรหัสหรือมีส่วนร่วมได้
แต่บอทนี้เพิกเฉยต่อ Robotic.txt ของ Iso ซ่อนอยู่หลังที่อยู่ IP อื่น ๆ และแกล้งทำเป็นผู้ใช้รายอื่น Iao กล่าว
“ มันไร้ประโยชน์ที่จะปิดกั้นบอท AI AI เพราะพวกเขาโกหกเปลี่ยนตัวแทนผู้ใช้ใช้ที่อยู่ IP ที่อยู่อาศัยเป็นพร็อกซีและอื่น ๆ
“ พวกเขาจะขูดเว็บไซต์ของคุณจนกว่ามันจะล้มลงจากนั้นพวกเขาจะขูดอีกครั้งพวกเขาจะคลิกทุกลิงก์ในทุกลิงก์ในทุกลิงก์ดูหน้าเดียวกันซ้ำแล้วซ้ำอีกพวกเขาบางคนจะคลิกลิงก์เดียวกันหลายครั้งในวินาทีเดียวกัน” นักพัฒนาเขียนในโพสต์
เข้าสู่ God of Graves
ดังนั้นฉันจึงต่อสู้ด้วยความฉลาดสร้างเครื่องมือที่เรียกว่า Anubis
สุสานคือ การตรวจสอบหลักฐานการทำงานร่วมกัน จะต้องผ่านก่อนที่คำขอจะได้รับอนุญาตให้เข้าสู่เซิร์ฟเวอร์ GIT มันบล็อกบอท แต่ให้ผ่านเบราว์เซอร์ที่มนุษย์ดำเนินการ
ส่วนที่ตลก: Anubis เป็นชื่อของพระเจ้าในเทพนิยายอียิปต์ที่นำคนตายไปสู่การพิพากษา
“ Anubis ชั่งน้ำหนักจิตวิญญาณของคุณ (หัวใจ) และถ้ามันหนักกว่าขนนกหัวใจของคุณก็ถูกกินและคุณเช่น Mega ก็ตาย” IaoSo กล่าวกับ TechCrunch หากคำขอเว็บผ่านความท้าทายและมุ่งมั่นที่จะเป็นมนุษย์ ภาพอนิเมะน่ารัก ประกาศความสำเร็จ ภาพวาดคือ“ ฉันใช้เวลาใน Anbis ของมนุษย์” Iso กล่าว หากเป็นบอทคำขอจะถูกปฏิเสธ
โครงการที่มีชื่อว่ามีชื่อว่าแพร่กระจายเหมือนลมในชุมชน Foss Iaso แชร์บน GitHub ในวันที่ 19 มีนาคมและในอีกไม่กี่วันมันรวบรวม 2,000 ดาวผู้มีส่วนร่วม 20 คนและ 39 ส้อม
การแก้แค้นเป็นการป้องกัน
ความนิยมในทันทีของ Anubis แสดงให้เห็นว่าความเจ็บปวดของ Iso นั้นไม่ซ้ำกัน อันที่จริง Venerandi แบ่งปันเรื่องราวหลังจากเรื่อง:
- ผู้ก่อตั้ง CEO ของ Sourcehut Drew Devault อธิบาย การใช้จ่าย“ จาก 20-100% ของเวลาของฉันในสัปดาห์ใดก็ตามที่ช่วยลดการรวบรวมข้อมูล LLM ที่ก้าวร้าวมากเกินไปในระดับ” และ“ ประสบปัญหาการหยุดทำงานสั้น ๆ หลายสิบครั้งต่อสัปดาห์”
- Jonathan Corbet นักพัฒนา FOSS ที่มีชื่อเสียงซึ่งบริหารเว็บไซต์ข่าวอุตสาหกรรม Linux LWN เตือนว่าเว็บไซต์ของเขาคือ ถูกชะลอตัวจากการจราจรระดับ DDOS “ จากบอทมีดโกน AI”
- Kevin Fenzi, Sysadmin ของโครงการ Linux Fedora ขนาดใหญ่ บอทมีดโกน AI กล่าว มีความก้าวร้าวมากเขาต้องปิดกั้นทั้งประเทศของบราซิลจากการเข้าถึง
Venerandi บอก TechCrunch ว่าเขารู้ว่าโครงการอื่น ๆ หลายโครงการประสบปัญหาเดียวกัน หนึ่งในนั้น“ ต้องห้ามที่อยู่ IP จีนทั้งหมดชั่วคราว ณ จุดหนึ่ง”
ปล่อยให้ปล่อยให้จมลงไปสักครู่ – ผู้พัฒนา“ ต้องหันไปห้ามทั้งประเทศ” เพียงเพื่อป้องกันบอท AI ที่ไม่สนใจไฟล์ Robotic.txt, Venerandi กล่าว
นอกเหนือจากการชั่งน้ำหนักจิตวิญญาณของผู้ร้องขอเว็บแล้ว devs คนอื่น ๆ เชื่อว่าการล้างแค้นเป็นการป้องกันที่ดีที่สุด
ไม่กี่วันที่ผ่านมา ข่าวแฮ็กเกอร์ผู้ใช้ Xyzal แนะนำการโหลด Robotic.txt หน้าต้องห้ามด้วย“ โหลดของบทความเกี่ยวกับประโยชน์ของการดื่มสารฟอกขาว” หรือ“ บทความเกี่ยวกับผลกระทบเชิงบวกของการจับหัดในการแสดงบนเตียง”
“ คิดว่าเราจำเป็นต้องตั้งเป้าหมายให้บอทได้รับ _negative_ ค่ายูทิลิตี้จากการเยี่ยมชมกับดักของเราไม่ใช่แค่ค่าศูนย์” Xyzal อธิบาย
เมื่อมันเกิดขึ้นในเดือนมกราคมผู้สร้างนิรนามที่รู้จักกันในชื่อ“ แอรอน” ปล่อยเครื่องมือที่เรียกว่า หมัด นั่นมีจุดมุ่งหมายที่จะทำอย่างนั้น มันกับดักรวบรวมข้อมูลในเขาวงกตที่ไม่มีที่สิ้นสุดของเนื้อหาปลอมเป้าหมายที่นักพัฒนายอมรับ Technica ก้าวร้าวถ้าไม่เป็นอันตรายอย่างจริงจัง เครื่องมือนี้ได้รับการตั้งชื่อตามพืชที่กินเนื้อเป็นอาหาร
และ CloudFlare ซึ่งอาจเป็นผู้เล่นเชิงพาณิชย์ที่ใหญ่ที่สุดที่เสนอเครื่องมือหลายอย่างเพื่อป้องกัน AI Crawlers เมื่อสัปดาห์ที่แล้วได้เปิดตัวเครื่องมือที่คล้ายกันที่เรียกว่า AI Labyrinth
มีจุดประสงค์เพื่อ“ ชะลอความสับสนและเสียทรัพยากรของซอฟต์แวร์รวบรวมข้อมูล AI และบอทอื่น ๆ ที่ไม่เคารพคำสั่ง ‘ไม่มีการรวบรวมข้อมูล’” Cloudflare อธิบาย ในบล็อกโพสต์– Cloudflare กล่าวว่ามันป้อนเครื่องรวบรวมข้อมูล AI ที่ไม่เหมาะสม“ เนื้อหาที่ไม่เกี่ยวข้องแทนที่จะแยกข้อมูลเว็บไซต์ที่ถูกต้องตามกฎหมายของคุณ”
Devault ของ Sourcehut บอกกับ TechCrunch ว่า“ Nepenthes มีความรู้สึกที่น่าพึงพอใจของความยุติธรรมเพราะมันเป็นเรื่องไร้สาระกับซอฟต์แวร์รวบรวมข้อมูลและพิษของพวกเขา แต่ในที่สุด Anubis ก็เป็นทางออกที่ใช้งานได้” สำหรับเว็บไซต์ของเขา
แต่ Devault ก็ออกมาสาธารณะด้วยความจริงใจสำหรับการแก้ไขโดยตรงมากขึ้น:“ โปรดหยุดการทำให้ถูกต้องตามกฎหมาย LLMS หรือเครื่องกำเนิดภาพ AI หรือ GitHub Copilot หรือขยะนี้ฉันขอร้องให้คุณหยุดใช้พวกเขาหยุดพูดถึงพวกเขาหยุดทำสิ่งใหม่เพียงแค่หยุด”
เนื่องจากความเป็นไปได้ของ Zilch นักพัฒนาโดยเฉพาะใน Foss กำลังต่อสู้ด้วยความฉลาดและอารมณ์ขัน
(tagstotranslate) โอเพ่นซอร์ส
