Файлы robots.txt и sitemap.xml генерируются автоматически. robots.txt генерируется при создании сайта, а sitemap.xml создается при активации модуля "Поиск по сайту" (и обновляется приблизительно раз за сутки - в зависимости от частоты добавляемого контента).
На индексацию ни тот, ни другой практически не влияют (практически - не значит, что совсем не влияют), сейчас поясню почему и как эти файлы работают с ПС.

В файле robots.txt расположена информация для поисковых систем, которая разрешает либо запрещает к индексации отдельные каталоги (страницы/файлы), то есть, простыми словами, указывает что именно надо или не надо индексировать. К примеру, зачастую поисковикам запрещают доступ к индексации каталога admin, ибо незачем обычным пользователям форма входа в админку.
Файл sitemap.xml хранит все страницы сайта (кроме технических, типа каталога admin). По файлу sitemap.xml поисковикам будет легче ориентироваться по сайту и индексировать его (к примеру, если ссылка на страницу нигде не указана, а sitemapу известна, он и отдаст её поисковику).