Buat anda yang baru belajar website mungkin anda belum paham apa itu web robot.  Jika anda belum tahu apa itu Web Robots. anda bisa mengunjungi situs ini http://www.robotstxt.org/ Disan...