ฉันใช้บรรทัดต่อไปนี้ใน<head>เว็บไซต์ของฉันมานานหลายปี:
<meta name="revisit-after" content="3 days" />
ฉันเพิ่งค้นพบว่ามันไม่ใช่เมตาแท็กที่ Google เข้าใจซึ่งฉันใช้เพื่อหมายความว่าไม่มีจุดรวมอยู่ในนั้นและมันไม่ได้ทำอะไรได้ดีมานานหลายปีแล้ว
เครื่องมือค้นหารวบรวมข้อมูลเว็บไซต์ตามค่าเริ่มต้นบ่อยแค่ไหนและมีวิธีใดที่เชื่อถือได้ในการเพิ่มหรือลดความถี่นั้น
คำตอบ:
คุณสามารถควบคุมวิธีการที่รวดเร็ว Google รวบรวมข้อมูลเว็บไซต์ของคุณใน Google Webmaster Tools
อัตราการรวบรวมข้อมูลสำหรับเว็บไซต์ของคุณกำหนดเวลาที่ Googlebot ใช้ในการรวบรวมข้อมูลเว็บไซต์ของคุณทุกครั้ง เป้าหมายของเราคือรวบรวมข้อมูลเว็บไซต์ของคุณอย่างทั่วถึง (เพื่อให้หน้าของคุณสามารถจัดทำดัชนีและส่งคืนในผลการค้นหา!) โดยไม่สร้างผลกระทบที่เห็นได้ชัดเจนต่อแบนด์วิดท์ของเซิร์ฟเวอร์ ในขณะที่เว็บมาสเตอร์ส่วนใหญ่ใช้งานได้ดีโดยใช้การตั้งค่าการรวบรวมข้อมูลเริ่มต้น (เช่นไม่จำเป็นต้องเปลี่ยนแปลง แต่เพิ่มเติมจากด้านล่าง) ผู้ดูแลเว็บบางรายอาจมีความต้องการที่เฉพาะเจาะจงมากขึ้น
Googlebot ใช้อัลกอริทึมที่ซับซ้อนซึ่งกำหนดจำนวนการรวบรวมข้อมูลในแต่ละไซต์ที่เข้าชม สำหรับเว็บไซต์ส่วนใหญ่ควรเลือกตัวเลือก "ให้ Google พิจารณาอัตราการรวบรวมข้อมูลของฉัน" ซึ่งเป็นค่าเริ่มต้น อย่างไรก็ตามหากคุณเป็นผู้ใช้ขั้นสูงหรือหากคุณกำลังประสบปัญหาแบนด์วิดท์กับเซิร์ฟเวอร์ของคุณคุณสามารถกำหนดอัตราการรวบรวมข้อมูลของคุณให้เป็นความเร็วที่เหมาะสมที่สุดสำหรับเว็บเซิร์ฟเวอร์ของคุณ ตัวเลือกอัตราการรวบรวมข้อมูลที่กำหนดเองช่วยให้คุณสามารถให้ข้อมูลเชิงลึกกับ Googlebot ถึงจำนวนคำขอสูงสุดต่อวินาทีและจำนวนวินาทีระหว่างคำขอที่คุณรู้สึกว่าดีที่สุดสำหรับสภาพแวดล้อมของคุณ
Googlebot กำหนดช่วงของอัตราการรวบรวมข้อมูลที่คุณมีใน Webmaster Tools นี่คือความเข้าใจของเราเกี่ยวกับความสามารถของเซิร์ฟเวอร์ของเรา ช่วงนี้อาจแตกต่างจากไซต์หนึ่งไปยังอีกไซต์หนึ่งและข้ามช่วงเวลาตามปัจจัยหลายประการ การตั้งค่าอัตราการรวบรวมข้อมูลเป็นค่าต่ำกว่าค่าเริ่มต้นอาจส่งผลต่อความครอบคลุมและความสดใหม่ของไซต์ของคุณในผลการค้นหาของ Google อย่างไรก็ตามการตั้งค่าเป็นค่าที่สูงกว่าค่าเริ่มต้นจะไม่ปรับปรุงความครอบคลุมหรือการจัดอันดับของคุณ หากคุณตั้งค่าอัตราการรวบรวมข้อมูลที่กำหนดเองอัตราใหม่จะมีผลเป็นเวลา 90 วันหลังจากนั้นค่าใหม่จะกลับมาเป็นค่าที่แนะนำของ Google
คุณสามารถใช้การตั้งค่านี้เฉพาะกับไซต์ระดับรากและไซต์ที่ไม่โฮสต์บนโดเมนขนาดใหญ่เช่น blogspot.com (เรามีการตั้งค่าพิเศษสำหรับพวกเขา) หากต้องการตรวจสอบการตั้งค่าอัตราการรวบรวมข้อมูลให้ลงชื่อเข้าใช้เครื่องมือของผู้ดูแลเว็บและไปที่แท็บการตั้งค่า หากคุณมีคำถามเพิ่มเติมโปรดไปที่ศูนย์ช่วยเหลือของผู้ดูแลเว็บเพื่อเรียนรู้เพิ่มเติมเกี่ยวกับวิธีที่ Google รวบรวมข้อมูลเว็บไซต์ของคุณหรือโพสต์คำถามของคุณในฟอรัมช่วยเหลือของผู้ดูแลเว็บ
นอกเหนือจากนั้นคุณอาจจำเป็นต้องสร้างระบบการกรองของคุณเองซึ่งดมกลิ่นเอเจนต์ผู้ใช้และอนุญาตหรือปฏิเสธบ็อตของเครื่องมือค้นหาที่อยู่ใน user-agent แต่นั่นจะส่งผลต่อการลดความถี่ของพวกเขาเท่านั้น
ในการตอบคำถามส่วนที่สองของคุณคุณสามารถบอก Google โดยใช้ Webmaster Tools
วิธีเปลี่ยนอัตราการรวบรวมข้อมูล:
ในหน้าแรกของเครื่องมือของผู้ดูแลเว็บให้คลิกเว็บไซต์ที่คุณต้องการ
ภายใต้การกำหนดค่าไซต์ให้คลิกการตั้งค่า
ในส่วนอัตราการรวบรวมข้อมูลให้เลือกตัวเลือกที่คุณต้องการ
https://www.google.com/support/webmasters/bin/answer.py?answer=48620&hl=en_GB
ในคำถามที่พบบ่อยของ Bingหมายถึงโพสต์นี้ซึ่งแนะนำให้ตั้งค่าCrawl-Delay: Xโดยที่ x คือจำนวนวินาทีที่รอระหว่างการร้องขอแต่ละครั้ง
แน่นอนว่าแผนผังไซต์ระบุว่าหน้าเปลี่ยนแปลงบ่อยเพียงใด