ผมว่าหลายๆ คนคงจะเคยได้ยินเกี่ยวกับว่า “Search Engine Robot” หรือภาษาไทยสั้นๆ ที่เราเรียกกันจนติดปากว่า “บอท” นั้นนำปัจจัยเรื่องของการโหลดเว็บเพจมาเกี่ยวข้องในการจัดอันดับเว็บ แต่จะมีสักกี่คนที่ได้เห็นการเปลี่ยนแปลงแบบจะๆ

วันนี้ผมมีภาพประทับใจที่ผมได้ทำการเก็บสถิติเกี่ยวกับการโหลดของหน้าเว็บ ซึ่งส่งผลโดยตรงต่อ Robot จนมั่นใจได้ว่า หากท่านสามารถทำเว็บของท่านให้โหลดได้เร็วมากขึ้น Robot ก็จะชอบที่จะไต่ไปตามลิงค์ต่างๆ มากขึ้นเช่นกัน

ขอเล่าถึงอดีต เพื่อให้เพื่อนทุกคนมองภาพออกนะครับ ในปลายเดือน กรกฎาคม 2552 ที่ผ่านมาหากได้ติดตามบล็อคแห่งนี้อยู่ตลอด จะทราบว่าเว็บ Hosting ผมมีปัญหาเนื่องจากการใช้ CPU ที่มากเกินไป ซึ่งเขาเสนอทางเลือกให้ผมสองทางคือ ติดตั้งระบบ Cache หรือไม่ก็ย้ายออกจาก Host นี้ไป

เมื่อผมได้รับคำตอบเช่นนี้ ด้วยความหยิ่งในศักดิ์ศรีก็เลยย้ายออก…. แหะๆ ล้อเล่นครับ ผมก็ทดลองติดตั้งระบบ Cache ให้กับเว็บก่อน เพราะว่าไม่เสียตังค์ :)  (อ่านเพิ่มเติมเกี่ยวกับ WordPress Cache ได้ที่นี่เลยครับ) ซึ่งจะเห็นได้จากภาพล่างสุด ที่บ่งบอกได้อย่างชัดเจนว่าหลังจากที่ติดตั้งระบบ Cache เข้าไปแล้ว ทำให้เวลาในการโหลดเว็บต่างกันหลายเท่าตัว เพราะกราฟจากเดิมที่ใช้มากสุดถึง 10,312 มิลลิวินาที ต่อหน้า แต่ปัจจุบันใช้เพียง 510 มิลลิวินาทีเท่านั้น

และแล้วเรื่องที่น่าสนใจก็เกิดขึ้น Google Robot ชักสนุกหลังจากที่สามารถโหลดหน้าเว็บได้อย่างรวดเร็ว เลยจัดการไต่ไปตามลิงค์ไปทั่วเว็บ ซึ่งจะเห็นได้จากภาพที่ 1 ค่าเฉลี่ยความถี่ในการ Crawled ของเว็บเดิมที่เฉลี่ยที่ 2,000 กว่าหน้าต่อวัน แต่ปัจจุบันเกิน 3,000 หน้าต่อวันไปแล้ว

เพื่อความแน่ใจว่าเจ้าบอท ไต่เยอะจริง ลองมาดูภาพที่ 2 กันอีกที จะสังเกตุว่าขนาดข้อมูล (Kilobytes) ที่ถูก Search Engine เรียกดูมีค่าเฉลี่ยที่สูงขึ้นกว่าเดิม และนี่พอจะเป็นคำยืนยันได้ว่าสิ่งที่เราคิดไม่ผิดจริงๆ

สรุปก็คือ 1 วันมี 24 ชั่วโมง หากเราสามารถทำให้ Robot ไต่ไปตามหน้าต่างๆของเว็บเรามากที่สุด ย่อมทำให้หน้าเว็บเพจใหม่ๆ มีโอกาสที่จะเจอได้รวดเร็วขึ้นเช่นกัน

เรื่องบางเรื่องมันก็ละเอียดอ่อนกว่าที่เราคิดมาก การทำ SEO ใช่ว่าเพียงแค่หยิบหนังสือขึ้นมาแล้วทำตาม ก็จะได้อันดับที่ดี เพียงแค่เรื่องของเวลาการโหลดก็มีผลต่อการเก็บข้อมูล ซึ่งอาจจะรวมถึงการจัดอันดับของ Search Engine ด้วย ตัวผมเองก็ใช่ว่าจะเป็นเทพจากไหน แต่สิ่งหนึ่งที่ผมยึดอยู่เสมอคือการพัฒนาตัวเองอยู่เสมอ เรียนรู้แบบ 360 องศา คือไม่ยึดติดกับแนวคิดแบบเดิมๆ และหวังว่าบทความไม่กี่บรรทัดของผมจะช่วยให้เพื่อนๆ ได้ไอเดียอื่นๆ อีกมากมาย