AI เกิดอะไรขึ้นเกี่ยวกับเว็บไซต์ของคุณและทำไมไม่ใช่ความผิดของคุณ: พบ llms.txt • yoast

AI เครื่องมือมีอยู่ทุกหนทุกแห่ง – ตั้งแต่ chatbots ที่ตอบคำถามลูกค้าไปจนถึงรูปแบบภาษาที่สรุปทุกอย่างตั้งแต่เอกสารไปจนถึงข้อความทางกฎหมาย แต่ถ้าคุณเคยถามโมเดลอย่าง CHATGPT เพื่ออธิบายเว็บไซต์ผลิตภัณฑ์หรือ API ของคุณผลลัพธ์อาจไม่ถูกต้อง ในความเป็นจริงบางครั้งพวกเขาก็จะออกไป และไม่นั่นไม่ใช่ความผิดของคุณ

การตัดการเชื่อมต่อระหว่างเว็บไซต์และ LLMS

โมเดลภาษาขนาดใหญ่ (LLMS) เช่น CHATGPT, Claude หรือราศีเมถุนได้รับการฝึกฝนให้เข้าใจเนื้อหาที่หลากหลาย แต่เมื่อพวกเขาพยายามตีความเว็บไซต์ของคุณ ที่รันไทม์นั่นคือเมื่อมีคนถามคำถามพวกเขาอย่างแข็งขันพวกเขาพบปัญหาหลักสองสามข้อ:

• HTML มีเสียงดัง แถบการนำทางแบนเนอร์คุกกี้ป๊อปอัปโมดอลและสคริปต์การวิเคราะห์ทำให้หน้า
• หน้าต่างบริบทมี จำกัด เว็บไซต์ส่วนใหญ่มีขนาดใหญ่เกินไปสำหรับ LLM ในการประมวลผลทั้งหมดในครั้งเดียว
• รายละเอียดที่สำคัญจะกระจายไปทั่วหลายหน้าหรือซ่อนอยู่ในตารางบล็อกรหัสหรือความคิดเห็น
• เอกสาร Markdown อาจมีอยู่ แต่แบบจำลองมักไม่สามารถค้นหาได้หรือแม้แต่รู้ว่ามีอยู่จริง

ดังนั้นเมื่อคุณขอให้เครื่องมือ AI“ อธิบายสิ่งที่ บริษัท นี้ทำ” หรือ“ สรุป API ห้องสมุดนี้” มันมักจะติดอยู่ มันข้ามบริบทของคีย์หรือคว้าสัญญาณที่ไม่ถูกต้องจากมาร์กอัปที่รก

มันไม่ได้มีเจตนาร้าย มันเป็นข้อ จำกัด การออกแบบ

ทำไมมันไม่ใช่ความผิดของ search engine optimization ของคุณเช่นกัน

คุณอาจลงทุนเวลาและความพยายามในการเพิ่มประสิทธิภาพกลไกค้นหา บางที robots.txt และ sitemap.xml ของคุณอยู่ในสถานที่ คุณมีเมตาแท็กข้อมูลที่มีโครงสร้างและการทำความสะอาดลิงก์ภายใน ดี แต่ LLMs ไม่ได้ผลเหมือน Google เสมอไป

search engine optimization แบบดั้งเดิมช่วยให้เว็บไซต์ของคุณได้รับ อย่างไรก็ตามไม่รับประกันว่าเครื่องมือ AI จะเข้าใจว่าผู้ใช้มนุษย์ต้องการอะไร นั่นคือสิ่งที่มีข้อเสนอใหม่เข้ามา

พบกับ llms.txt: วิธีง่ายๆในการช่วยให้ AI เข้าใจเว็บไซต์ของคุณ

นักพัฒนาจำนวนมากขึ้นและนักวิจัย AI กำลังใช้มาตรฐานที่มีน้ำหนักเบาและอ่านง่ายที่เรียกว่า llms.txt–

llms.txt คืออะไร?

llms.txt เป็นไฟล์ markdown ธรรมดาที่วางไว้ที่รูทของเว็บไซต์ของคุณที่ให้แบบจำลองภาษาพร้อมบทสรุปของโครงการของคุณและลิงก์โดยตรงเพื่อทำความสะอาดหน้าสำคัญเวอร์ชัน LLM ที่อ่านได้ มันถูกออกแบบมาสำหรับการใช้เวลาอนุมานช่วยให้เครื่องมือ AI เข้าใจโครงสร้างจุดประสงค์และเนื้อหาของไซต์ได้อย่างรวดเร็วโดยไม่ต้องพึ่งพา HTML หรือข้อมูลเมตาที่ยุ่งเหยิงสำหรับเครื่องมือค้นหา

มันทำอะไร:

• ให้สรุปสั้น ๆ เกี่ยวกับเว็บไซต์หรือโครงการของคุณ
• ลิงค์ไปยังทำความสะอาดรุ่นคีย์มาร์คดาวน์รุ่น LLM พร้อม
• ช่วยเครื่องมือ AI ค้นหาสิ่งที่สำคัญโดยไม่แยกวิเคราะห์ HTML ที่ยุ่งเหยิง

ได้รับการสนับสนุนอย่างกว้างขวางหรือไม่? ยัง

ตอนนี้ไม่มีผู้ให้บริการ LLM รายใหญ่สนับสนุน llms.txt อย่างเป็นทางการ เครื่องมือเช่น GPTBOT (OpenAI), Claude (มานุษยวิทยา) และ AI Crawlers ของ Google ไม่ได้อ้างอิงหรือปฏิบัติตามเป็นส่วนหนึ่งของพฤติกรรมการคลานของพวกเขา บริษัท บางแห่งเช่นมานุษยวิทยาเผยแพร่ LLMS.TXT ไฟล์ตัวเอง แต่ไม่มีหลักฐานว่าตัวรวบรวมข้อมูลใด ๆ ที่ใช้อย่างแข็งขันในการดึงหรือฝึกอบรม

ถึงกระนั้นก็ยังมีความพยายามต่ำและไม่มีความเสี่ยงที่ช่วยเตรียมไซต์ของคุณสำหรับอนาคตที่การเข้าถึง LLM ที่มีโครงสร้างจะกลายเป็นมาตรฐานมากขึ้น และเครื่องมือที่หันหน้าเข้าหา LLM หรือแม้แต่ตัวแทน AI ของคุณเองก็สามารถใช้ประโยชน์ได้ในวันนี้

ตัวอย่างการใช้กรณี:

• ห้องสมุด dev ลิงก์ไปยังเอกสาร API และตัวอย่างการใช้งาน. MD
• เว็บไซต์ของมหาวิทยาลัยเน้นคำอธิบายหลักสูตรและนโยบายการศึกษา
• บล็อกส่วนบุคคลนำเสนอระยะเวลาที่ง่ายของโครงการสำคัญหรือหัวข้อ

คุณควบคุมเนื้อหาและโครงสร้าง LLMS ได้รับประโยชน์จากบริบทที่รับรู้ LLM และผู้ใช้ที่ถามคำถามเกี่ยวกับเว็บไซต์ของคุณจะได้รับคำตอบที่ดีกว่า

ใช้ปลั๊กอิน search engine optimization Yoast ของเรา?

หากคุณใช้ปลั๊กอิน Yoast search engine optimization (ฟรีหรือพรีเมี่ยม) ของเราอยู่แล้ว การสร้างไฟล์ llms.txt เป็นเรื่องง่าย– เพียงเปิดใช้งานคุณสมบัติในการตั้งค่าของคุณและปลั๊กอินจะสร้างและให้บริการไฟล์ LLMS.TXT ที่สมบูรณ์สำหรับเว็บไซต์ของคุณโดยอัตโนมัติ คุณสามารถดูได้ตลอดเวลาที่ ourdomain.com/llms.txt

เว็บที่เป็นมิตรกับ LLM นั้นไม่เหมือนกับเว็บที่เป็นมิตรกับ Google

สิ่งนี้ไม่ได้แทนที่ search engine optimization คิดว่า llms.txt เป็นเพื่อนร่วมกับ robots.txt มันบอก AI Bots:“ นี่คือสิ่งที่ดีข้ามเสียงรบกวน”

SiteMaps ช่วยให้ผู้รวบรวมข้อมูลพบทุกสิ่ง llms.txt บอก LLM ว่าจะทำอย่างไร จุดสนใจ บน.

มีประโยชน์อย่างยิ่งสำหรับ:

• นักพัฒนาและผู้ดูแลโอเพนซอร์ซ
• นักการตลาดผลิตภัณฑ์ที่ต้องการลดภาระการสนับสนุน
• ทีมที่ต้องการให้แชทบอทดึงคำตอบจากเอกสารไม่เดา

คุณไม่จำเป็นต้องมี CMS ใหม่หรือสแต็คเทคโนโลยี

ทั้งหมดนี้ต้องการคือการสร้างสองสิ่ง:

1. ไฟล์ llms.txt พื้นฐานใน markdown
2. ตามหลักการแล้วคุณยังมีเวอร์ชัน Markdown (.html.md) ของหน้าคีย์ที่รวมอยู่ข้างต้นฉบับพร้อมกับ URL Plus เดียวกัน. MD

ไม่จำเป็นต้องใช้เครื่องมือใหม่ปลั๊กอินหรือเฟรมเวิร์กแม้ว่าระบบนิเวศบางอย่างกำลังเพิ่มการสนับสนุนอยู่แล้ว

นี่คือตัวอย่างของไฟล์ที่สร้างโดย Yoast search engine optimization โดยอัตโนมัติเนื่องจากมีตัวสร้าง LLMS.TXT ในตัว:

Generated by Yoast search engine optimization v25.3, that is an llms.txt file, meant for consumption by LLMs. That is the (sitemap)(https://everydayimtravelling.com/sitemap_index.xml) of this web site. 
 
# everydayimtravelling.com: Tales from our travels 
 
## Posts 
- (Check video)(https://everydayimtravelling.com/test-video/) 
- (A Journey By means of Portugal’s Wine Nation: A Recommended Wine Tour Route)(https://everydayimtravelling.com/a-wine-tour-through-portugal/) 
- (Journey necessities for backpackers FAQ)(https://everydayimtravelling.com/travel-essentials-for-backpackers-faq/) 
 
## Pages 
- (Checkout)(https://everydayimtravelling.com/checkout/) 
- (Contact us)(https://everydayimtravelling.com/contact-us/) 
- (How we began this weblog)(https://everydayimtravelling.com/pagina-harry-potter/) 
- (My account)(https://everydayimtravelling.com/my-account/) 
- (Cart)(https://everydayimtravelling.com/cart/) 
 
## Classes 
- (Europe)(https://everydayimtravelling.com/class/europe/) 
- (Asia)(https://everydayimtravelling.com/class/asia/) 
- (South America)(https://everydayimtravelling.com/class/south-america/) 
- (Meals)(https://everydayimtravelling.com/class/meals/) 
- (Western Europe)(https://everydayimtravelling.com/class/europe/west-europe/) 
 
## Tags 
- (Funds)(https://everydayimtravelling.com/tag/price range/) 

ช่วย AI ช่วยคุณ

ดังนั้นหาก AI ตีความเว็บไซต์ของคุณผิดการผลิตบทสรุปที่ผิดพลาดหรือข้ามเนื้อหาที่สำคัญมีเหตุผลและสามารถแก้ไขได้

ไม่ใช่สำเนาของคุณเสมอไป ไม่ใช่การออกแบบหรือข้อมูลเมตาของคุณ เป็นเพียงเครื่องมือภาษาเหล่านี้ต้องการคำแนะนำเล็กน้อย ในอนาคต llms.txt อาจเป็นวิธีที่จะมอบให้พวกเขาและคุณทำตามเงื่อนไขของคุณ

คุณต้องการความช่วยเหลือในการสร้างไฟล์ llms.txt หรือแปลงเนื้อหาที่มีอยู่เป็น markdown สำหรับ LLM หรือไม่? yoast search engine optimization สามารถสร้างไฟล์ llms.txt ให้คุณได้โดยอัตโนมัติ

Edwin Toonen

เอ็ดวินเป็นผู้เชี่ยวชาญด้านเนื้อหาเชิงกลยุทธ์ที่มีประสบการณ์ ก่อนเข้าร่วม Yoast เขาทำงานให้กับนิตยสารการออกแบบเว็บระดับสูงซึ่งเขาได้พัฒนาความเข้าใจที่กระตือรือร้นเกี่ยวกับวิธีการสร้างเนื้อหาที่ยอดเยี่ยม

---