กูเกิลประกาศชื่อบ็อต crawler ไล่ดูดหน้าเว็บตัวใหม่ชื่อ Google-Extended มีหน้าที่ดูดข้อมูลไปใช้สำหรับงาน AI โดยเฉพาะ เช่น Bard และ Vertex AI เพื่อให้เจ้าของเว็บไซต์สามารถกำหนดค่าได้ง่ายว่าอนุญาตให้บ็อตดูดหน้าเว็บหรือไม่ ผ่านไฟล์ robots.txt ที่ใช้งานกันอยู่แล้ว
เนื่องจากบ็อต Google-Extended เป็นบ็อตตามมาตรฐานของกูเกิล เจ้าของเว็บสามารถเขียนกฎแบบเดียวกับบ็อตอื่นๆ ที่ใช้งานอยู่แล้วในไฟล์ robots.txt ได้ เช่น
User-agent: Google-Extended
Disallow: /
ที่มา - Google
ภาพหุ่นยนต์ robots.txt จาก @googlesearchc
Comments
ส่วนตัวไม่ต้าน Ai และยินดีให้ Ai นำเว็บไปทำอะไรก็ได้
แต่ก็ไม่ค่อยชอบกติกาแบบนี้ คือเจ้าของบ้านต้องทำตามกฎผู้มาเยี่ยมเยือน ใช้รูปแบบหรือมาตรฐานตตามผู้มาเยือน ไม่อย่างงั้นจะถือว่าอนุญาต
ที่จริงผู้มาเยือนควรทำตามกฎเจ้าของบ้านมากกว่า เช่นเจ้าบ้านอาจใช้วิธีที่แตกต่างกันแต่ละบ้าน ในการประกาศกฏ แต่ผู้มาเยือนตต้องใส่ใจและปฏิบัติตาม