ความเห็นของ Matt Cutts เกี่ยวกับการ Crawling  (เก็บข้อมูล) และ Indexation (การสร้างดัชนี) หรือ อินเด็กซ์  ของ Google
สรุปได้เป็นข้อๆ ดังนี้

1. สำหรับ Google แล้วการอินเด็กซ์ไม่ใช่เรื่องยาก แต่การอินเด็กซ์มีข้อจำกัด
Pagerank คือตัวชี้วัดที่สำคัญ ต่อการอินเด็กซ์ (PR สูงโอกาสถูกอินเด็กซ์ก็สูงตามไปด้วย)

2. Duplicate Content (เนื้อหาซ้ำซ้อน) ไม่ดีต่อการอินเด็กซ์
Canonicalizing ก็ช่วยได้ไม่มาก ถ้าในเวบไซต์มี Duplicate Content มากเกินไป

3.  Affiliate links จะไม่ถูกอินเด็กซ์

4. 301 Redirects ส่งค่า Pagerank และ Link Juice  ไปบางส่วนเท่านั้น (มีบางส่วนที่สูญหายไป)

5. เว็บเพจขยะ หรือ เนื้อหาซ้ำซ้อน ทำให้การอินเด็กซ์แย่ลง หรือไม่ถูกอินเด็กซ์เลย

6. Navigation (เมนู ) ที่ออกแบบไม่ดี หรือ ออกแบบเพื่อ Pagerank sculpting ภายในเว็บไซท์ สร้างปัญหาในการอินเด็กซ์


ที่มา: http://www.seomoz.org/blog/an-illustrated-guide-to-matt-cutts-comments-on-crawling-indexation