รวมตัวแทนผู้ใช้ใน robots.txt


11

ตัวแทนผู้ใช้สามารถแสดงรายการร่วมกันตามด้วยกฎทั่วไปเช่นในrobots.txt ได้หรือไม่

User-agent: Googlebot
User-agent: ia_archiver #Alexa
User-agent: BingPreview #Microsoft
User-agent: bingbot #Microsoft
User-agent: MSNBot #Microsoft
User-agent: Slurp #Yahoo
User-agent: Ask Jeeves/Teoma #Ask
Disallow: /adm30_buds/

1
มีเหตุผลหรือไม่ที่คุณไม่ได้ใช้งานuser-agent: *ตามด้วยไม่อนุญาต รายการของตัวแทนผู้ใช้ "อนุญาต" ยาวกว่ารายการที่คุณต้องการไม่อนุญาตหรือไม่
Mike Hudson

คำตอบ:


10

ใช่. สมมติว่าชื่อตัวแทนของคุณมีการระบุอย่างถูกต้องดูเหมือนว่าควรใช้งานได้ นี่คือแหล่งข้อมูลหากคุณต้องการอ่านเพิ่มเติม https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt


1
ข้อมูลจำเพาะ robots.txt เดิมตกลง: "ถ้ามากกว่าหนึ่งฟิลด์ User-agent เป็นปัจจุบันบันทึกอธิบายถึงนโยบายการเข้าถึงที่เหมือนกันมากกว่าหนึ่งหุ่นยนต์."
Ilmari Karonen
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.