User-agent: * #указывает, для каких роботов установлены директивы Disallow: /login/ Disallow: /send/ Disallow: /updates/ Disallow: /updatesarc/ Sitemap: http://liner74.ru/sitemap.xml # указывает роботу на файл Sitemap для сайта