Robots.txt, web sitenizin kök dizininde bulunur ve sitenizi taramaya mevrut taharri motorlar?na hangi sayfalar?n?z? taray?p hangilerini dizinlerine ekleyebileceklerini söyleyen bir komut dosyas?d?r. Sitenize mevrut botlar burada önem düz komutlar? kovu?turma ederek eylem paha.Google’?n yön? aral?k farkl? web siteleri de size ve amaç kitlen