В карту сайта попадают только системные страницы. для html страниц нужно создавать карту сайта самостоятельно, заливать её в файловый менеджер и давать ей имя отличное от sitemap.xml например mysitemap.xml Файл robots.txt будет доступен на редактирование только тогда, когда вы зальете его в файловый менеджер