ข้ามไปเนื้อหาหลัก

ขาย​คอน​เทนต์​ให้ AI ด้วย Pay Per Crawl, RSL หรือ​ตลาด​กลาง

อัปเดตล่าสุด 29 กันยายน 2569
เวลาอ่านประมาณ 14 นาที
ขาย​คอน​เทนต์​ให้ AI ด้วย Pay Per Crawl, RSL หรือ​ตลาด​กลาง

KEY TAKEAWAYS

3 ประเด็น

เจ้าของ​เว็บ​มี​สาม​ทาง​เมื่อ​บอท AI เข้า​มา​อ่าน คือ​ให้​อ่าน​ฟรี บล็อก หรือ​เก็บ​เงิน

ทาง​ที่​สาม​เพิ่ง​มี​เครื่อง​มือ​รองรับ ได้แก่ Pay Per Crawl ของ Cloudflare ที่​ตอบ​บอ​ทด้วย​รหัส 402 พร้อม​ราคา มาตรฐาน RSL 1.0 ที่​ประกาศ​เงื่อนไข​ใช้​งาน​แบบ​เครื่อง​อ่าน​ได้ และ​ตลาด Publisher Content Marketplace (PCM) ของ Microsoft

ทั้ง​สาม​ระบบ​ยัง​อยู่​ใน​ช่วง​เริ่ม​ต้น ณ กันยายน 2569

Pay Per Crawl ยัง​เป็น​เบต้า​ปิด PCM ยัง​เป็น​โครงการ​นำร่อง​ที่​เริ่ม​กับ Copilot ส่วน RSL เป็น​มาตรฐาน​เปิด​ที่​ใคร​ก็​ใส่​ใน​เว็บ​ได้ แต่​บอท​ต้อง​ยอม​ทำ​ตาม​เอง

เว็บ phygital.co.th ส่ง​ข้อมูล​ให้​บอท AI ไป​ราว 790 เมกะไบต์​ใน​เจ็ด​วัน (23-29 กันยายน 2569)

GPTBot ดึง​ไป​มาก​ที่สุด 238.72 เมกะไบต์ ขณะ​ที่​รายงาน​ของ Cloudflare ยัง​ไม่มี​ข้อมูล​คน​ที่​กด​กลับ​เข้า​เว็บ​จาก​คำ​ตอบ​ของ AI ตัวเลข​ชุด​นี้​คือ​ข้อมูล​ตั้ง​ต้น​ที่​ใช้​ตัดสิน​ใจ​ว่า​จะ​ให้​ฟรี​ต่อ​หรือ​ไม่

เจ้าของ​เว็บ​เลือก​ได้​สาม​ทาง​เมื่อ​บอท AI เข้า​มา​อ่าน คือ​ให้​ฟรี บล็อก หรือ​เก็บ​เงิน​ด้วย Pay Per Crawl ของ Cloudflare มาตรฐาน RSL และ​ตลาด PCM ของ Microsoft

เจ้าของ​เว็บ​ที่​ลงทุน​เขียน​บทความ​มา​หลาย​ปี​กำลัง​เจอ​คำถาม​ที่​ไม่​เคย​ต้อง​ตอบ บอท AI เข้า​อ่าน​เว็บ​บ่อย​ขึ้น แต่​คน​ที่​กด​กลับ​เข้า​มา​จาก​คำ​ตอบ​ของ AI มี​น้อยห​รือ​วัด​ไม่​ได้ การ​ปล่อย​ให้​อ่าน​ฟรี​ต่อ​ไป​เท่ากับ​แจก​ของ​โดย​ไม่รู้​ว่า​ได้​อะไร​กลับ​มา ส่วน​การ​บล็อก​ทั้งหมด​อาจ​ทำให้​แบรนด์​หาย​จาก​คำ​ตอบ​ที่​ลูกค้า​ถาม

บท​นี้​เทียบ​เครื่อง​มือ​เก็บ​เงิน​จา​กบอท AI ที่​มี​อยู่​จริง​สาม​แบบ คือ Pay Per Crawl, RSL และ​ตลาด PCM พร้อม​กรณี Axios ที่​ขาย​ข่าว​เป็น​ฟีด แล้ว​ใช้​ตัว​เลข​บอ​ท​เจ็ด​วัน​จาก​เว็บ​ของ​ฟิจิ⁠ทัล​เอง​เป็น​ตัวอย่าง​ว่า​ข้อมูล​แบบ​ไหน​ที่​เจ้าของ​เว็บ​ต้อง​ดู​ก่อน​เลือก​ทาง

ทำไม​สื่อ​เริ่ม​คิด​เงิน​จา​กบอท AI

สื่อ​บาง​ราย​ที่​เปิด​เผย​ตัวเลข​มี​คน​คลิก​มา​จาก Google ลด​ลง​เกือบ​ครึ่ง ราย​ได้​จาก​โฆษณา​บน​หน้า​เว็บ​ลด​ตาม​จำนวน​คน​เข้า แต่​บอท​ที่​เข้า​มา​อ่าน​ไม่​ได้​สร้าง​ราย​ได้​แบบ​เดียวกัน สื่อ​บาง​ราย​จึง​เริ่ม​หา​ทาง​คิด​เงิน​จา​กบ​อท​แทน​การ​รอ​ให้​คน​กลับ​มา

The Next Web รายงาน​เมื่อ 16 กันยายน 2569 ว่า Reach ผู้​พิมพ์ Mirror และ Express ของ​อังกฤษ มี​ทราฟ​ฟิก​จาก Google ลดลง 46% เทียบ​กับ​ปี​ก่อน บริษัท​ประกาศ​ลด​ตำแหน่ง​กอง​บรรณาธิการ 220 ตำแหน่ง เปิด​ตำแหน่ง​ใหม่​ด้าน​สมาชิก​และ​วิดีโอ​ราว 60 ตำแหน่ง และ​ปิด​เว็บ​ข่าว​ท้อง​ถิ่น​สาม​แห่ง คือ KentLive, AberdeenLive และ GalwayBeo David Higgerson ประธาน​เจ้า​หน้าที่​ฝ่าย​คอน​เทนต์​ของ Reach อธิบาย​ว่า​ผู้​อ่าน​กำลัง​เปลี่ยน​วิธี​รับ​คอน​เทนต์​ครั้ง​ใหญ่

คน​คลิก​จาก​ผล​ค้นหา​น้อย​ลง​เพราะ​อะไร

คำ​ตอบ​ที่ AI สรุป​ไว้​บน​หน้า​ผล​ค้นหา​ทำให้​ผู้​ค้นหา​ได้​ข้อมูล​โดย​ไม่​ต้อง​กด​เข้า​เว็บ​ต้นทาง The Next Web อธิบาย​การ​ลด​ลง​ของ Reach ว่า​มา​จาก Google ใช้ AI ตอบ​คำถาม​บน​หน้า​ผล​ค้นหา​เอง​มาก​ขึ้น หน้า​เว็บ​ที่​ยัง​ได้​คลิก​จึง​ต้อง​ให้​สิ่ง​ที่​คำ​ตอบ​สั้น​ให้​ไม่​ได้ วิธี​ออกแบบ​หน้า​ให้​คน​ที่​คลิก​เข้า​มา​ทำ​ต่อ​จน​จบ​อยู่​ในSXO คือ​อะไร เมื่อ​คน​คลิก​น้อย​ลง หน้า​เว็บ​ต้อง​ปิด​งาน​ให้​ได้

Pay Per Crawl เก็บ​เงิน​บอท​ต่อ​ครั้ง​อย่างไร

Pay Per Crawl คือ​ระบบ​ของ Cloudflare ที่​ให้​เจ้าของ​เว็บ​ตั้ง​ราคา​ต่อ​การ​เข้า​อ่าน​หนึ่ง​ครั้ง เอกสาร​ของ Cloudflare ปรับปรุง​ล่าสุด 28 กรกฎาคม 2569 อธิบาย​ว่า​เจ้าของ​เว็บ​ตั้ง​ราคา​หนึ่ง​ราคา​ต่อ​โดเมน บอท​ที่​ขอ​หน้า​เว็บ​ต้อง​แนบ​เจตนา​จ่าย​เงิน​มา​กับ​คำขอ​เพื่อ​ได้​หน้า​เว็บ​ตาม​ปกติ ถ้า​ไม่​แนบ บอท​จะ​ได้​คำ​ตอบ​รหัส 402 พร้อม​ราคา

Cloudflare ทำ​หน้าที่​เป็น​ผู้รับ​ชำระ​เงิน (Merchant of Record) และ​จัด​ระบบ​ให้​ทั้ง​สอง​ฝั่ง ถ้า​เจ้าของ​เว็บ​บล็อก​บอท​ตัว​ใด​ด้วย​กฎ WAF หรือ Bot Management อยู่​แล้ว กฎ​นั้น​มี​ผล​เหนือ​การ​ตั้ง​ราคา บอท​ตัว​นั้น​จะ​เข้า​ไม่​ได้​แม้​ยอม​จ่าย ณ วัน​ที่​ตรวจ​เอกสาร ระบบ​ยัง​เป็น​เบต้า​ปิด เจ้าของ​เว็บ​ต้อง​สมัคร​เข้า​ร่วม​ผ่าน​แบบ​ฟอร์ม​ของ Cloudflare

HTTP 402 คือ​อะไร

HTTP 402 Payment Required คือ​รหัส​ตอบ​กลับ​ที่​หมาย​ถึง​ต้อง​ชำระ​เงิน​ก่อน​จึง​ได้​เนื้อหา มาตรฐาน HTTP ฉบับ RFC 9110 ยัง​เขียน​ไว้​ว่า​รหัส​นี้​สงวน​ไว้​ใช้​ใน​อนาคต Pay Per Crawl นำ​มา​ใช้​กับ​บอ​ท​โดย​เฉพาะ คน​ที่​เปิด​เว็บ​ผ่าน​เบราว์เซอร์​ยัง​เห็น​หน้า​เว็บ​ตาม​ปกติ บอท​ที่​ไม่​จ่าย​ได้​เพียง​รหัส 402 กับ​ราคา จึง​รู้ทัน​ที​ว่า​เนื้อหา​นี้​มี​ค่า​ใช้​จ่าย ไม่​ได้​ถูก​ปิด​เฉย ๆ

RSL ประกาศ​เงื่อนไข​การ​ใช้​คอน​เทนต์​ให้​เครื่อง​อ่าน

RSL (Really Simple Licensing) คือ​มาตรฐาน​เปิด​ที่​ให้​เจ้าของ​เว็บ​เขียน​เงื่อนไข​การ​ใช้​คอน​เทนต์​เป็น​ไฟล์​ที่​บอ​ทอ่าน​ได้ ข้อ​กำหนด RSL 1.0 ออก​เป็น​สถานะ Recommendation เมื่อ 10 ธันวาคม 2568 คณะ​บรรณาธิการ​มา​จาก RSL Collective, Condé Nast, Ziff Davis, Schema.org, Yahoo, Automattic, O'Reilly Media และ Fastly

ไฟล์ RSL แยก​สิทธิ์​ตาม​วิธี​ใช้​งาน เช่น ai-train สำหรับ​ฝึก​หรือ​ปรับ​แต่ง​โมเดล และ ai-input สำหรับ​การ​ดึง​เนื้อหา​ไป​ประกอบ​คำ​ตอบ เจ้าของ​เว็บ​เลือก​ได้​ว่า​วิธี​ไหน​อนุญาต วิธี​ไหน​ห้าม และ​วิธี​ไหน​ต้อง​จ่าย รูป​แบบ​การ​จ่าย​มี​หลาย​แบบ

รูป​แบบ​การ​จ่าย​ใน RSL ความ​หมาย
attribution ใช้ได้​ฟรี​แต่​ต้อง​ให้​เครดิต​พร้อม​ลิงก์​กลับ​ต้นทาง
crawl จ่าย​ทุก​ครั้ง​ที่​บอ​ท​เข้า​มา​อ่าน
subscription จ่าย​เป็น​รอบ หรือ​ทำ​สัญญา​แยก​กับ​เจ้าของ​เว็บ

เว็บ​บอก​บอ​ทว่า​มี​ไฟล์​เงื่อนไข​ได้​สอง​ทาง คือ​เพิ่ม​บรรทัด License: ชี้​ไป​ที่​ไฟล์​ใน robots.txt หรือ​ส่ง​ส่วน​หัว Link พร้อม​รหัส 402 เมื่อ​บอท​ขอ​หน้า​เว็บ

RSL ต่าง​จาก robots.txt อย่างไร

robots.txt บอก​ได้​แค่​ว่า​บอท​ตัว​ไหน​เข้า​หน้า​ไหน​ได้ ส่วน RSL บอก​ต่อว่า​เข้า​มา​แล้ว​นำ​เนื้อหา​ไป​ใช้​ทำ​อะไร​ได้​บ้าง และ​แต่ละ​การ​ใช้​งาน​มี​เงื่อนไข​อะไร ทั้ง​สอง​อย่าง​ทำงาน​คู่​กัน โดย robots.txt เป็น​ที่​ประกาศ​ว่า​มี​ไฟล์ RSL อยู่ ข้อ​จำกัด​เหมือน​กัน​คือ​ทั้ง​คู่​เป็นการ​ประกาศ บอท​ที่​ไม่​ยอม​ทำ​ตาม​ยัง​เข้า​เว็บ​ได้ เจ้าของ​เว็บ​จึง​ต้อง​ใช้​ระบบ​บังคับ​อย่าง Pay Per Crawl หรือ​การ​บล็อก​ระดับ​เซิร์ฟเวอร์​ประกอบ

ตลาด​กลาง PCM ของ Microsoft

Publisher Content Marketplace (PCM) คือ​ตลาด​ที่ Microsoft ตั้ง​ขึ้น​ให้​ผู้​เผย​แพร่​ตั้ง​เงื่อนไข​การ​ใช้​คอน​เทนต์ และ​ให้​ผู้​พัฒนา AI ซื้อ​สิทธิ์​ใช้​ตาม​กรณี​ที่​ต้องการ บล็อก Microsoft Advertising เมื่อ 3 กุมภาพันธ์ 2569 อธิบาย​ว่า​ตลาด​นี้​แก้​ปัญหา​ที่​ผู้​เผย​แพร่​แต่ละ​ราย​ต้อง​ทำ​สัญญา​กับ​บริษัท AI ที​ละ​ราย และ​มี​รายงาน​การ​ใช้​งาน​ให้​ผู้​เผย​แพร่​เห็น​ว่า​เนื้อหา​ชิ้น​ไหน​ถูก​ใช้

Microsoft ออกแบบ PCM ร่วม​กับ The Associated Press, Business Insider, Condé Nast, Hearst Magazines, People Inc, USA TODAY และ Vox Media เริ่ม​ใช้​กับ Microsoft Copilot ทั้ง​รุ่น​องค์กร​และ​รุ่น​ผู้​ใช้​ทั่วไป แล้ว​เริ่ม​รับ​ผู้​ซื้อ​ราย​แรก​นอก Microsoft คือ Yahoo

ผู้​เผย​แพร่​ราย​เล็ก​เข้า​ร่วม PCM ได้​หรือ​ไม่

ประกาศ​ของ Microsoft ระบุ​ว่า PCM จะ​รองรับ​ผู้​เผย​แพร่​ทุกข​นาด ตั้งแต่​องค์กร​ระดับ​ประเทศ​ไป​จนถึง​ผู้​เชี่ยวชาญ​เฉพาะ​ทาง​และ​สื่อ​อิสระ การ​เข้า​ร่วม​เป็น​ไป​โดย​สมัคร​ใจ แต่ ณ กุมภาพันธ์ 2569 ตลาด​ยัง​อยู่​ใน​ช่วง​นำร่อง​ที่ Microsoft เลือก​พันธมิตร​เอง ประกาศ​ฉบับ​นี้​ไม่​ได้​ระบุ​วัน​เปิด​รับ​สมัคร​ทั่วไป หรือ​เงื่อนไข​สำหรับ​ผู้​เผย​แพร่​นอก​สหรัฐ เจ้าของ​เว็บ​ใน​ไทย​จึง​ยัง​ต้อง​ติดตาม​ประกาศ​รอบ​ถัด​ไป

Axios Direct ขาย​ข่าว​เป็น​ฟีด​ให้ AI โดยตรง

Axios เลือก​ส่ง​ข่าว​ให้ AI ผ่าน​ฟีด​ที่​ลูกค้า​จ่าย​ค่า​สมาชิก แทน​การ​รอ​ให้​บอ​ทมา​อ่าน​หน้า​เว็บ Digiday รายงาน​เมื่อ 18 กันยายน 2569 ว่า Axios เปิด​ตัว Axios Direct ที่​งาน Digiday Publishing Summit วัน​ที่ 16 กันยายน 2569 แผน​มี​สาม​ฟีด

ฟีด ลูกค้า สถานะ​ตาม​รายงาน
ฟีด​ที่​หนึ่ง บริษัท​ลงทุน​และ​การ​เงิน ค่า​สมาชิก​ราย​ปี​ตาม​ขนาด​บริษัท สัญญา​สอง​ปี
ฟีด​ที่​สอง บริษัท​ที่​มี​โมเดล AI ภายใน​องค์กร อยู่​ระหว่าง​เจรจา ยัง​ไม่มี​กำหนด​เปิด
ฟีด​ที่​สาม ผู้​ใช้​ทั่วไป​ที่​ให้​ผู้​ช่วย AI ของ​ตัว​เอง​อ่าน​ข่าว ขั้น​ต้น​ที่สุด วางแผน​ศึกษา​ต่อ​ใน​ปี 2570

Jacquelyn Cameron ประธาน​เจ้า​หน้าที่​ฝ่าย​ราย​ได้​ของ Axios อธิบาย​ว่า​สัญญา​สอง​ปี​เปิด​โอกาส​ให้​บริษัท​ทดลอง​และ​ปรับ​สินค้า​ระหว่าง​ทาง รายงาน​เดียวกัน​ระบุ​ว่า Axios ยัง​ไม่​ปิด​ทาง​ใส่​คอน​เทนต์​ที่​แบรนด์​สนับสนุน​ลง​ใน​ฟีด ซึ่ง​ใกล้​กับ​รูป​แบบ​ที่​อธิบาย​ไว้​ในAgent Ads คือ​อะไร โฆษณา​ที่​มี​แต่ AI อ่าน กับ​เหตุ​ที่​ถูก​บล็อก

Google จ่าย​เงิน​ให้​เว็บ​ที่​เนื้อหา​ช่วย​สร้าง​คำ​ตอบ AI

Google ทดลอง​จ่าย​เงิน​ให้​เว็บ​ที่​เนื้อหา​มี​ส่วน​สำคัญ​ใน​คำ​ตอบ​ของ Gemini, AI Overviews และ AI Mode โครงการ​นี้​ชื่อ AI contribution pilot Digiday รายงาน​เมื่อ 14 กันยายน 2569 ว่า​เว็บ​ที่​เข้า​ร่วม​จะ​เห็น​แผง​ราย​ได้​ราย​เดือน​เพิ่ม​ขึ้น​ใน Search Console แต่​แผง​นี้​ไม่​บอก​ว่า Google คิด​ตัวเลข​อย่างไร เว็บ​ถอน​ตัว​ออก​ได้​ทุก​เมื่อ และ Google ยืนยัน​กับ Digiday ว่า​เป็น​โครงการ​นำร่อง​ระยะ​แรก

Google ยัง​ไม่มี​ประกาศ​แยก​ของ​โครงการ​นี้ หน้าที่ Google ให้ Digiday ดู​ประกอบ​คือบทความ​นโยบาย​สาธารณะ​ของ Google เดือน​มิถุนายน 2569 ซึ่ง​เขียน​ว่า​กำลัง​ทดลอง​วิธี​ใหม่​ใน​การ​ร่วม​มือ​กับ​เว็บ​ที่​เนื้อหา​ช่วย​ให้​คำ​ตอบ AI ทัน​สมัย​และ​ถูก​ต้อง ผ่าน​ขั้น​ตอน grounding คือ​ขั้น​ที่​ระบบ​ดึง​หน้า​เว็บ​มา​ประกอบ​ตอน​เขียน​คำ​ตอบ

ตัวเลข​ทั้งหมด​ของ​โครงการ​มา​จาก​สื่อ ไม่มี​ตัวเลข​จาก Google และ The Next Web ซึ่ง​สรุป​รายงาน​ของ The Information ระบุ​เอง​ว่า​ยัง​ไม่​ได้​ตรวจ​ตัวเลข​เหล่า​นี้

เรื่อง ที่​รายงาน แหล่ง
จำนวน​ผู้​เผย​แพร่​ที่​ได้​รับ​เงิน ราว 100 ราย The Information ตาม​ที่ The Next Web สรุป​ไว้ 30 กันยายน 2569
ราย​ได้​ของ​เว็บ​ที่​เข้า​ร่วม​ก่อน ราย​หนึ่ง​ได้​มากกว่า 1 ล้าน​ดอลลาร์​ต่อ​ปี แหล่ง​เดียวกัน
ราย​ได้​ของ​เว็บ​ขนาด​เล็ก หลาย​ราย​ได้​ไม่​ถึง 1,000 ดอลลาร์​ใน​เวลา​หลาย​เดือน The Next Web
เว็บ​กลุ่ม​ไหน​สนใจ เว็บ​ขนาด​เล็ก​และ​กลาง และ​ไม่​จำกัด​แค่​สำนัก​ข่าว Digiday

ทาง​เลือก​ก่อน​หน้า​นี้​ต่าง​จาก​โครงการ​ของ Google ตรง​ที่​เจ้าของ​เว็บ​มี​ส่วน​กำหนด​ราคา Pay Per Crawl ให้​เจ้าของ​เว็บ​ตั้ง​ราคา​ต่อ​ครั้ง RSL ให้​ประกาศ​เงื่อนไข​เอง PCM ให้​ตั้ง​เงื่อนไข​ใน​ตลาด​กลาง และ Axios ทำ​สัญญา​กับ​ลูกค้า​โดยตรง ส่วน​โครงการ​ของ Google ให้ Google ประเมิน​เอง​ว่า​เนื้อหา​ชิ้น​ไหน​มี​ส่วน​ใน​คำ​ตอบ แล้ว​จ่าย​ตาม​ตัวเลข​ที่ Google คิด ผู้​บริหาร​สื่อ​ราย​หนึ่ง​บอก Digiday ว่า​ระบบ​นี้ "quite black box" และ​อีก​ราย​ปฏิเสธ​เพราะ​ข้อ​เสนอ​ต่ำ​เกิน​กว่า​จะ​เข้า​ร่วม

เว็บ​ใน​ไทย​สมัคร​เข้า​โครงการ​นี้​ได้​หรือ​ไม่

ยัง​ไม่มี​ช่อง​ให้​สมัคร Digiday รายงาน​ว่า Google เป็น​ฝ่าย​ติดต่อ​ผู้​เผย​แพร่​เอง และ9to5Google รายงาน​เมื่อ 17 กันยายน 2569 ว่า​หน้า​ช่วย​เหลือ​ของ​โครงการ​ไม่​เปิด​ให้​คน​ทั่วไป​อ่าน ทั้ง​บทความ​ของ Google และ​รายงาน​ของ​สื่อ​ไม่​ได้​ระบุ​ประเทศ​หรือ​ภาษา​ที่​เปิด จึง​ยัง​ตอบ​ไม่​ได้​ว่า​เว็บ​ไทย​จะ​ได้​รับ​เชิญ​หรือ​ไม่ ข้อมูล​ที่​เจ้าของ​เว็บ​ใน​ไทย​เปิด​ดู​เอง​ได้​ตอน​นี้​คือ​รายงาน​การ​แสดง​ผล​ใน​ฟีเจอร์ AI ของ Search Console ซึ่ง​บอก​ว่า​หน้า​ไหน​ของ​เว็บ​แสดง​ใน​ฟีเจอร์ AI บ่อย​แค่​ไหน วิธี​อ่าน​รายงาน​นี้​อยู่​ในรับ​ทำ SEO สำหรับ AI (AEO/GEO) อะไร​วัด​ได้ อะไร​ยัง​วัด​ไม่​ได้

บอ​ท​เอา​อะไร​ไป​จาก​เว็บ​ฟิจิ⁠ทัล​ใน​เจ็ด​วัน

เว็บ phygital.co.th ส่ง​ข้อมูล​ให้​บอท AI รวม​ราว 790 เมกะไบต์ ใน​สัปดาห์ 23-29 กันยายน 2569 ข้อมูล​ชุด​นี้​มา​จาก​หน้า​สถิติ​บอท​ของ Cloudflare ซึ่ง​ทีม​ฟิจิ⁠ทัล​เปิด​ดู​ใน​วัน​สุดท้าย​ของ​ช่วง ยอด 791.57 เมกะไบต์​มา​จาก​การ​บวก​ห้า​อันดับ​แรก​กับ​กลุ่ม​ที่​เหลือ​ใน​รายงาน

บอท ข้อมูล​ที่​ดึง​ไป คำขอ​ที่​ได้​หน้า​เว็บ​สำเร็จ (2xx)
GPTBot 238.72 MB 4,410
OAI-SearchBot 193.44 MB 5,770
PerplexityBot 95.32 MB 1,580
BingBot 85.89 MB 1,890
PetalBot 81.54 MB 1,280
บอ​ทอีก 8 ตัว​รวม​กัน 96.66 MB 2,010

คำขอ​ไม่​ได้​จบ​ด้วย​หน้า​เว็บ​ทุก​ครั้ง ใน​เจ็ด​วัน​เดียวกัน​มี​คำ​ตอบ 404 หน้า​ไม่​พบ 7,030 ครั้ง และ 503 เซิร์ฟเวอร์​ไม่​พร้อม 2,090 ครั้ง จาก​คำขอ​ทั้งหมด 28,640 ครั้ง จำนวน​ผู้​อ่าน​ที่​ตาม​ลิงก์​ใน​คำ​ตอบ​ของ AI มา​ถึง​เว็บ (ช่อง Referral Traffic) ยัง​ว่าง​อยู่ การ​เทียบ​ว่า​เว็บ​ให้​ข้อมูล​ไป​เท่าไร​และ​ได้​คน​กลับ​มา​เท่าไร​จึง​ยัง​ทำ​จาก​รายงาน​นี้​ไม่​ได้ ต้อง​ใช้​ข้อมูล​จาก​เครื่อง​มือ​วัดผล​ของ​เว็บ​เอง​ประกอบ

path ที่​บอท AI เรียก​มาก​ที่สุด​คือ /_next/image ซึ่ง​เป็น​ตัว​ย่อ​ขนาด​รูป​ของ​เว็บ 1,761 ครั้ง​บน​โดเมน​หลัก และ 1,278 ครั้ง​บน​โดเมน www ตาม​มา​ด้วย​หน้า​รวม​บทความ /insights 1,174 ครั้ง รูปภาพ​จึง​เป็น​ส่วน​ของ​เว็บ​ที่​บอ​ท​เรียก​บ่อย​ที่สุด​ใน​สัปดาห์​นั้น

ทำไม​บอ​ทบาง​ตัว​เข้า​โฟลเดอร์​ที่ robots.txt ปิด​ไว้​ได้

บอท​ที่​มี​กลุ่ม​คำ​สั่ง​ของ​ตัว​เอง​ใน robots.txt จะ​ทำตา​มก​ลุ่ม​นั้น​กลุ่ม​เดียว และ​ไม่​ใช้​กฎ​ของ​กลุ่ม User-agent: * มาตรฐาน RFC 9309 ข้อ 2.2.1 ระบุ​ว่า​บอท​ใช้​กลุ่ม * เฉพาะ​เมื่อ​ไม่มี​กลุ่ม​ที่​ตรง​กับ​ชื่อ​ตัว​เอง robots.txt ของ phygital.co.th ปิด /_next/ ไว้​ใน​กลุ่ม * แต่​เขียน​กลุ่ม​แยก​ให้ GPTBot กับ​บอท AI อีก​หลาย​ตัว​ว่า Allow: / บอ​ทก​ลุ่ม​นี้​จึง​เข้า /_next/image ได้​ตาม​กติกา เจ้าของ​เว็บ​ที่​แยก​กลุ่ม​ให้​บอท AI ต้อง​คัด​ลอก​บรรทัด Disallow ที่​ต้องการ​ไป​ไว้​ใน​กลุ่ม​นั้น​ด้วย

ให้​ฟรี บล็อก หรือ​เก็บ​เงิน เลือก​จาก​คำถาม 4 ข้อ

เจ้าของ​เว็บ​ตอบ​คำถาม​สี่​ข้อ​นี้​จาก​ข้อมูล​ของ​เว็บ​ตัว​เอง​ได้​ก่อน​เลือก​ทาง ทั้ง​สี่​ข้อ​ใช้​ข้อมูล​ที่​เปิด​ดู​ได้​จาก​รายงาน​บอ​ทกับ​เครื่อง​มือ​วัดผล​ของ​เว็บ

  1. ราย​ได้​หลัก​มา​จาก​เนื้อหา หรือ​จาก​สินค้า​และ​บริการ ถ้า​มา​จาก​เนื้อหา การ​เก็บ​เงิน​จา​กบ​อท​คุ้ม​ที่​จะ​ทดลอง ถ้า​มา​จาก​สินค้า​และ​บริการ การ​ถูก AI พูด​ถึง​มี​ค่า​มากกว่า
  2. บอ​ทก​ลุ่ม​ไหน​เข้า​มา​มาก​ที่สุด บอ​ท​เก็บ​ข้อมูล​ฝึก​โมเดล​กับ​บอท​ค้นหา​ให้​ผล​ต่าง​กัน การ​ปิด​บอท​ฝึก​โมเดล​แต่​เปิด​บอท​ค้นหา​เป็น​ทาง​กลาง​ที่​ทำได้​ทันที​ใน robots.txt
  3. มี​คน​กด​กลับ​เข้า​เว็บ​จาก​คำ​ตอบ​ของ AI หรือ​ไม่ ดู​จาก​แหล่ง​ที่มา​ของ​ผู้​เข้า​ชม​ใน​เครื่อง​มือ​วัดผล ถ้า​แทบ​ไม่มี การ​ให้​ฟรี​ก็​ไม่​ได้​อะไร​กลับ​มา​ใน​รูป​ผู้​อ่าน
  4. robots.txt ที่​มี​อยู่​อนุญาต​อะไร​ไป​แล้ว ตรวจ​ว่า​กลุ่ม​คำ​สั่ง​แยก​ขอ​งบ​อท​แต่ละ​ตัว​มี​บรรทัด Disallow ครบ​ตาม​ที่​ตั้งใจ​หรือ​ไม่ ก่อน​เพิ่ม​ไฟล์ RSL หรือ​สมัคร Pay Per Crawl

เว็บ​ที่​ตอบ​ข้อ​หนึ่ง​ว่า​ราย​ได้​มา​จาก​เนื้อหา และ​ตอบ​ข้อ​สาม​ว่า​แทบ​ไม่มี​คน​กด​กลับ คือ​กลุ่ม​ที่​ควร​เริ่ม​จาก​การ​ประกาศ​เงื่อนไข​ด้วย RSL แล้ว​ติดตาม​ว่า Pay Per Crawl หรือ PCM เปิด​รับ​เมื่อไร ส่วน​เว็บ​ของ​ธุรกิจ​ที่​ขาย​สินค้า​และ​บริการ ใช้​ข้อมูล​ชุด​เดียวกัน​เพื่อ​เลือก​ว่า​จะ​ปิด​บอท​ตัว​ไหน และ​เปิด​บอท​ตัว​ไหน​ไว้ ร้าน​ที่​ขาย​สินค้า​ออนไลน์​มี​อีก​เรื่อง​ให้​เตรียม คือ​ฟีด​สินค้า​ที่​ผู้​ช่วย AI ใช้​เทียบ​และ​สั่ง​ซื้อ อธิบาย​ไว้​ในAgentic Commerce คือ​อะไร UCP, ACP และ​ฟีด​ที่​ร้าน​ไทย​เตรียม​ได้

สรุป

เจ้าของ​เว็บ​มี​สาม​ทาง​เมื่อ​บอท AI เข้า​มา​อ่าน คือ​ให้​ฟรี บล็อก หรือ​เก็บ​เงิน เครื่อง​มือ​เก็บ​เงิน​ที่​มี​อยู่​จริง ณ กันยายน 2569 ได้แก่ Pay Per Crawl ของ Cloudflare ที่​ตอบ​บอ​ทด้วย​รหัส 402 และ​ยัง​เป็น​เบต้า​ปิด มาตรฐาน RSL 1.0 ที่​ประกาศ​เงื่อนไข​แยก​ตาม​การ​ใช้​งาน​แต่​ไม่มี​ระบบ​บังคับ​ใน​ตัว และ​ตลาด PCM ของ Microsoft ที่​ยัง​อยู่​ใน​ช่วง​นำร่อง​กับ Copilot ส่วน Axios เลือก​ขาย​ข่าว​เป็น​ฟีด​แบบ​สมาชิก ตัวเลข​เจ็ด​วัน​ของ​เว็บ​ฟิจิ⁠ทัล​แสดง​ว่า​บอ​ทดึง​ข้อมูล​ไป​ราว 790 เมกะไบต์ โดย​ยัง​วัด​คน​ที่​กด​กลับ​จาก​คำ​ตอบ​ของ AI ไม่​ได้ และ​พบ​ว่า robots.txt ที่​แยก​กลุ่ม​ให้​บอท AI เปิด​ทาง​มากกว่า​ที่​ตั้งใจ

คำถามที่พบบ่อย (FAQ)

เอกสาร​ของ Cloudflare ไม่​ได้​จำกัด​ประเทศ แต่​ระบบ​ยัง​เป็น​เบต้า​ปิด​ที่​ต้อง​สมัคร​และ​รอ​การ​ตอบ​รับ เจ้าของ​เว็บ​ต้อง​ใช้ Cloudflare เป็น​ตัวกลาง​ของ​โดเมน​อยู่​แล้ว ส่วน​บอท​ที่​จ่าย​ได้​ต้อง​ลง​ทะเบียน​กับ Cloudflare ด้วย ถ้า​บอ​ทราย​ใหญ่​ยัง​ไม่​ลง​ทะเบียน การ​ตั้ง​ราคา​จะ​มี​ผล​เท่ากับ​การ​บล็อก​บอ​ทราย​นั้น

RSL เป็นการ​ประกาศ​เงื่อนไข ไม่มี​ระบบ​บังคับ​ใน​ตัว บริษัท AI ที่​ตกลง​ใช้​มาตรฐาน​นี้​จะ​อ่าน​และ​ทำ​ตาม ส่วน​ราย​ที่​ไม่​ตกลง​ยัง​เข้า​เว็บ​ได้​ถ้า​ไม่​ถูก​บล็อก ไฟล์ RSL จึง​มี​ประโยชน์​ที่สุด​เมื่อ​ใช้​คู่​กับ​ระบบ​ที่​ตอบ​รหัส 402 หรือ​การ​บล็อก​ระดับ​เซิร์ฟเวอร์

เอก​สา​รบ​อท​ของ OpenAI แยก​งาน​ขอ​งบ​อท​ไว้ GPTBot เก็บ​ข้อมูล​ที่​อาจ​ใช้​ฝึก​โมเดล ส่วน OAI-SearchBot ใช้​แสดง​เว็บ​ใน​ผล​ค้นหา​ของ ChatGPT และ​การ​ตั้ง​ค่า​แต่ละ​ตัว​แยก​จาก​กัน การ​บล็อก​เฉพาะ GPTBot จึง​ไม่​ได้​ปิด​ทาง​ค้นหา เจ้าของ​เว็บ​เลือก​เปิด​หรือ​ปิด​แยก​ตาม​ชื่อ​บอ​ท​ได้​ใน robots.txt

เว็บ​ที่​ทำ​เงิน​จาก​ยอด​ขาย​สินค้า​หรือ​ค่า​บริการ​ได้​ประโยชน์​จาก​การ​ถูก AI พูด​ถึง​มากกว่า​ค่า​เข้า​อ่าน การ​เก็บ​เงิน​เหมาะ​กับ​เว็บ​ที่​เนื้อหา​คือ​สินค้า เช่น​เว็บ​ข่าว ฐาน​ข้อมูล หรือ​คู่มือ​เชิง​ลึก ธุรกิจ​ทั่วไป​ควร​ใช้​เวลา​กับ​การ​ทำ​ให้​บอท​ค้นหา​อ่าน​ข้อมูล​ธุรกิจ​ได้​ครบ วิธี​ปรับ​เนื้อหา​ให้ AI หยิบ​ไป​ตอบ​อยู่​ในGEO คือ​อะไร งาน​วิจัย​ต้น​เรื่อง​ทดสอบ 9 วิธี​ให้ AI หยิบ​เนื้อหา

RSS ส่ง​หัว​ข่าว​และ​ลิงก์​ให้​ใคร​ก็ได้​ที่​สมัคร​รับ​ฟรี ส่วน Axios Direct เป็น​ฟีด​แบบ​เสีย​เงิน​ที่​จัด​รูป​แบบ​ให้​โมเดล​และ​เอ​เจน​ต์ AI นำ​ไป​ใช้​ต่อ​ได้ Digiday อธิบาย​ว่า​เป็นการ​ผสม​แนวคิด​ของ Bloomberg Terminal กับ RSS ลูกค้า​กลุ่ม​แรก​จ่าย​ค่า​สมาชิก​ราย​ปี​ตาม​ขนาด​บริษัท

ผู้​ใช้ Cloudflare เปิด​กราฟ Data transfer over time ใน​ราย​งา​นบ​อท​ของ​โดเมน แล้ว​เลือก​จัด​กลุ่ม​ตาม​ชื่อ​บอท ผู้​ที่​ดูแล​เซิร์ฟเวอร์​เอง​รวม​ขนาด​คำ​ตอบ​ใน​บันทึก​การ​เข้า​ถึง (access log) แยก​ตาม​ชื่อ User-Agent ตัวอย่าง​ที่​บอ​ท​เห็น​เนื้อหา​ไม่​ครบ​เพราะ​หน้า​เว็บ​โหลด​ทีหลัง​ด้วย​จาวา​สคริปต์​อยู่​ในPantip กับ AI Search บอต​เห็น​ตัว​กระทู้ แต่​อาจ​ไม่​เห็น​คอม​เมน​ต์

PHYGITAL INSIGHT

ฟิจิ⁠ทัล​เจอ​ช่อง​โหว่​ใน robots.txt ของ​เว็บ​ตัว​เอง​ระหว่าง​เขียน​บท​นี้ กลุ่ม​คำ​สั่ง​ที่​แยก​ไว้​ให้​บอท AI เปิด​ทาง​ให้​บอ​ท​เข้า​โฟลเดอร์​ที่​กลุ่ม​หลัก​ปิด​ไว้ ก่อน​ตัดสิน​ใจ​เก็บ​เงิน​หรือ​บล็อก เจ้าของ​เว็บ​ต้อง​รู้​ก่อน​ว่า​ไฟล์​ที่​มี​อยู่​อนุญาต​อะไร​ไป​แล้ว​บ้าง บริการ​ดูแล​รักษา​เว็บไซต์​ของ​ฟิจิ⁠ทัล​ใน​หมวด​ความ​ปลอดภัย​ตรวจ​ไฟล์ robots.txt เทียบ​กับ​ราย​ชื่อ​บอท​ที่​เข้า​เว็บ​จริง แล้ว​แก้​กลุ่ม​คำ​สั่ง​ให้​ตรง​กับ​สิ่ง​ที่​เจ้าของ​เว็บ​ตั้งใจ

ให้ PHYGITAL AGENCY ช่วยต่อยอดเรื่องนี้สู่ผลลัพธ์จริง

บอท AI เข้า​เว็บ​ทุก​วัน แต่​ยัง​ไม่รู้​ว่า​ไฟล์ robots.txt ปล่อย​ให้​บอท​ตัว​ไหน​เข้า​ส่วน​ไหน​ของ​เว็บ​ไป​แล้ว

ให้ PHYGITAL AGENCY เปิด​ราย​งา​นบ​อท​ของ​เว็บ เทียบ​กับ​กลุ่ม​คำ​สั่ง​ที่​ตั้ง​ไว้ แล้ว​ช่วย​เลือก​ว่า​บอท​ตัว​ไหน​ควร​เปิด ตัว​ไหน​ควร​ปิด ก่อน​ตัดสิน​ใจ​เก็บ​เงิน​หรือ​ประกาศ​เงื่อนไข​การ​ใช้​คอน​เทนต์

PARANATH PANARATANA

WRITTEN BY

PARANATH PANARATANA

CHAIRMAN OF PHYGITAL AGENCY

ประธานกรรมการบริษัท ฟิจิทัล เอเจนซี จำกัด มีประสบการณ์ดูแลการตลาดที่ผสานโลกจริงและโลกออนไลน์เข้าด้วยกัน ตลอดจนเป็นที่ปรึกษาในการวินิจฉัยธุรกิจ อีกทั้งยังเคยทำงานในสายวิดีโอโปรดักชั่นและภาพยนตร์ไทยอีกด้วย