robots.txt เก็บไว้ที่ไหนสำหรับการติดตั้ง WordPress Multisite

9

Google Webmaster Tools สามารถดูได้ แต่หาไม่เจอ มีความคิดเกี่ยวกับวิธีการสร้างหรือโครงสร้างไฟล์อยู่ที่ไหน? ฉันไม่เห็นไฟล์ในรูทของฉัน เว็บไซต์ของฉันอยู่ที่http://mikewills.meและ URL ไฟล์ robots.txt คือhttp://mikewills.me/robots.txt

ในที่สุด Google ไม่ได้จัดทำดัชนีเว็บไซต์ของฉันและฉันกำลังพยายามหาวิธีแก้ไข robots.txt เพื่อให้สามารถสร้างดัชนีได้ ฉันได้เปลี่ยนตัวเลือกความเป็นส่วนตัวเพื่ออนุญาตการจัดทำดัชนี แต่ยังไม่ได้อัปเดต robots.txt

multisite

— ไมค์พินัยกรรม
แหล่งที่มา

ลิงค์เว็บไซต์? robots.txt ไม่น่าจะเกี่ยวข้องกับ WP ...

— Rarst

11

มันสร้างขึ้นแบบไดนามิกโดยฟังก์ชั่นdo_robots()ซึ่งมีทั้งการกระทำ ( do_robotstxt) และตัวกรอง ( robots_txt) หากคุณสร้างrobots.txtไฟล์ในรูท WordPress ของคุณไฟล์นั้นจะ (อาจ) แสดงเมื่อ/robots.txtได้รับการร้องขอไม่เช่นนั้นการประมวลผลจะล้มลงบนเวิร์ดเพรส

ไฟล์ปัจจุบันของคุณมีลักษณะดังนี้:

User-agent: *
Disallow:

Sitemap: http://mikewills.me/sitemaps/mikewills-me.xml.gz

การตั้งค่าสองรายการแรกนั้นเหมาะสมสำหรับบล็อกที่จัดทำดัชนีได้ ดังนั้นคุณอาจรอ Google ณ จุดนี้ บางทีคุณอาจต้องขอให้พิจารณาเว็บไซต์ของคุณใหม่

— Annika Backstrom
แหล่งที่มา

ขอบคุณสำหรับข้อมูล. ฉันอยู่ภายใต้สมมติฐานนี้ ฉันกลัวที่จะเห็น Disallow ถ้าอย่างนั้นก็โอเค?

— Mike Wills

2

@ ไมค์: ใช่มันก็โอเค สิ่งที่คุณพูดตอนนี้คือ: "เฮ้โรบอตที่มีการUser-agentจับคู่*(ดังนั้นโรบอตทั้งหมด) รายการหน้าเว็บที่คุณไม่สามารถเข้าถึงได้คือ[empty]" ซึ่งหมายความว่าพวกเขาสามารถเข้าถึงทุกหน้า

— Jan Fabry

ดูเหมือนว่าการเพิ่ม robots.txt ไปที่รูทจะไม่สามารถใช้งานได้ แต่ยังคงรองรับ WordPress ที่สร้างขึ้น ไม่มีวิธีเพิ่มหรือแก้ไข robots.txt โดยไม่ต้องติดตั้งปลั๊กอินหรือไม่

— Nick

3

robots.txt ถูกสร้างแบบไดนามิก ไม่มีไฟล์ robots.txt ติดตั้งปลั๊กอิน robots.txt จะแก้ปัญหาของคุณ หวังว่านี่จะช่วยได้

— user1167
แหล่งที่มา