Google อาจขยายรายการกฎ Robots.txt ที่ไม่รองรับผ่าน @sejournal, @MattGSouthern

Google อาจขยายรายการกฎ robots.txt ที่ไม่รองรับโดยใช้ข้อมูล HTTP Archive และอาจขยายวิธีการจัดการกับการสะกดคำว่า disallow ที่ผิดพลาดทั่วไป บทความ Google May Expand Unsupported Robots.txt Rules List ปรากฏครั้งแรกบน Search Engine Journal