User-agent: * #указывает, для каких роботов установлены директивы
Disallow: /login/
Disallow: /send/
Disallow: /updates/
Disallow: /updatesarc/
Sitemap: http://liner74.ru/sitemap.xml # указывает роботу на файл Sitemap для сайта