Robot ของ Google มีอยู่ด้วยกัน 3 ตัว ทำหน้าที่แตกต่างกันดังนี้  …

Google Robot

1. Googlebot

  • เป็น Robot หลักของ Google ทำหน้าที่เก็บ indexes ของเว็บไซต์ต่างๆ อาศัยการ Crawl ไปตามลิ้งค์ต่างๆ เป็นตัวที่จะทำการสำรวจ ตรวจสอบเว็บไซต์
  • จากนั้นจะส่งข้อมูล เข้า Data Centers ของ Google รวมทั้งส่งต่อให้ Google Deepbot ทำการ Crawl หน้าเว็บอีกครั้งหนึ่ง เป็นการนำร่องมาสำรวจข้อมูล ก่อนส่ง Deepbot มาจัดการทำ Index อย่างละเอียดอีกครั้งหนึ่ง
  • Googlebot ยังทำหน้าที่ตรวจสอบหน้าเว็บ เนื้อหาต่างๆ ที่มีการเปลี่ยนแปลงไป และส่งข้อมูลต่อให้ Google Fleshbot อีกครั้ง เพื่อให้มาตรวจสอบ Content ใหม่ๆ
  • โดยปรกติแล้ว Googlebot จะทำหน้าที่ตรวจสอบหน้าเว็บที่เปลี่ยนไป โดยจะส่งข้อมูลที่จำเพาะเจาะจง เพื่อให้ Google Freshbot ทำการ index หน้านั้นบ่อยๆ เท่าที่จะเป็นไปได้

ดังนั้น Googlebot ถือว่า เป็น Robot ตัวสำคัญของ Google เพราะ Googlebot ตัวนี้ ทำหน้าที่ค้นหาว่า หน้าเว็บมีลิ้งค์ไปยังที่ใดบ้าง มี “Keyword” หรือ Search Term อะไรบ้าง รวมทั้งเป็นตัวช่วยในการ คำนวณ “PageRank” ด้วย

2. Google Deepbot

  • ทำหน้าที่เข้าไปทำการสำรวจเว็บไซต์ ต่างๆ อย่างละเอียด โดยจะเริ่มต้นในหน้าเว็บที่ Googlebot ได้เก็บข้อมูลไว้แล้ว มาทำการสำรวจต่ออย่างละเอียด
  • ดังนั้นในหน้าเว็บไซต์ต่างๆ ที่มีการเปลี่ยนแปลงไปจากเดิม มีลิ้งค์ใหม่ๆ ที่เพิ่มเติมขึ้นมามากเกินกว่า Googlebot ได้เก็บไว้
  • Google Deepbot ลงไปเก็บข้อมูลเพิ่มเติมด้วย และรวมทั้งข้อมูลที่เป็นไฟล์จำพวก pdf, doc, xls หรือแม้แต่ zip file ที่มีลิ้งค์ปรากฏอยู่ในหน้าเว็บ

3. Google Freshbot

  • เป็น Robot ที่ค่อนข้างจะไวต่อการ Crawl ไปตามหน้าเว็บต่างๆ
  • หน้าเว็บที่มีการเปลี่ยนแปลงไปจากเดิมในช่วงเวลาประมาณ 1 สัปดาห์ Google Freshbot จะจำไว้ว่า หน้าเว็บไหนที่มีการเปลี่ยนแปลงเป็นประจำ หรือ เปลี่ยนแปลงบ่อย
  • Google Freshbot ทำหน้าที่ index หน้าเว็บที่พบว่า มีคนใช้ Keyword บางคำบ่อยๆ เป็นจำนวนมาก และมีคนที่คลิกลิ้งค์ไปยังหน้าที่ Google แสดงเป็นจำนวนมาก
  • Google Freshbot จะทำหน้าที่เข้ามาเก็บ index หน้านั้นอย่างต่อเนื่อง สม่ำเสมอ
  • ่ในขณะเดียวกัน หาก Google Freshbot ไม่สามารถทำการ index หรือ Crawl หรือ ไม่พบหน้า page หลายครั้ง มันก็จะส่งข้อมูลกลับไป และปลด indexs ที่เก็บไว้ อย่างรวดเร็วเช่นกัน

Google Freshbot จะไม่ทำหน้าที่ซ้ำกับ Deepbot ในส่วนที่เก็บ index ของไฟล์ประเภทอื่นๆ เช่น pdf, doc หรือสรุปอย่างง่ายๆ ก็คือ นอกเหนือจาก text และ html

จุดที่น่าสนใจ และเป็นแนวทางในการทำ SEO นั่นคือ การที่ผู้ทำเว็บ จะต้องหมั่น Update content อย่างต่อเนื่อง สม่ำเสมอ แม้ว่าบางครั้ง ในหน้าเว็บที่เป็น static การเพิ่มเติมลิ้งค์ หรือ ปรับปรุง content เก่าๆ ย่อมจะส่งผลให้ หน้าเว็บไม่ถูกลดอันดับลงจากหน้าแสดงผลการค้นหาของ Google ด้วย เพราะ Google ให้ความสำคัญกับหน้าเว็บที่มีการเปลี่ยนแปลงเสมอ เนื่องจาก Google เห็นว่าจะมีความหมายอะไร หากผู้ใช้งาน ค้นหาเจอหน้าเว็บที่ตายแล้ว …