หากข้อมูลในนั้นมีความสำคัญ และไม่ต้องการให้ crawler ของ search engine เช่น google, yahoo and msn
มาเก็บ index ให้สร้าง file ชื่อ robots.txt save as utf-8 และใส่คำสั่งนี้
User-agent: *
Disallow: /โฟล์เดอร์เอกสารความลับ/
Disallow: /เอกสารอื่นๆ/
upload ขึ้น document root หลักของเวบ
ก็ไม่มีใครค้นหาไฟล์ในนั้นและเปิดอ่านได้ เพราะ search engine ไม่รู้ url นั้น
หากไม่ใส่แปลว่าท่านต้องการเปิดน่ะ
มันมีคำสั่งค้นหาทะลุได้หมดเลย ว่างๆ จะเขียนวิธีค้นหาดังใจ ให้ดูครับ