"Бот" - это часть программного обеспечения поискового сервера, который сотворен для того, чтоб пройти каждую страничку Вашего сайта, проиндексировать её, и разместить это в базе данных. 

 У Гугл есть три известные бота: Adsensebot, Freshbot и DeepCrawl. От них зависит, как часто google индексирует сайты.