Новые вопросы с тегом «sitemap»

Я очень незнаком с веб-инструментами Google, такими как Google Analytics или Search Console, (поэтому извиняюсь, если что-то из этого не имеет смысла), и я впервые имею дело с проверкой сайта или представлением карты сайта. В конце концов, цель состоит в том, чтобы переключиться на HTTPS для всего с...

Я ищу инструмент FLOSS, который загружает все страницы (и встроенные ресурсы, например изображения), связанные в карте сайта XML (созданной в соответствии с http://www.sitemaps.org/ ). Инструмент должен регулярно сканировать карту сайта и искать новые и удаленные URL-адреса и изменения в lastmodэлем...

Мне нужно получить целую карту сайта в формате, подобном: http://example.org/ http://example.org/product/ http://example.org/service/ http://example.org/about/ http://example.org/product/viewproduct/ Мне нужно, чтобы он был основан на ссылках (без файла или dir brute-force), например: разобрать д...

Допустим, у меня есть sitemap.xmlфайл с этими данными: <url> <loc>http://domain.com/pag1</loc> <lastmod>2012-08-25</lastmod> <changefreq>weekly</changefreq> <priority>0.9</priority> </url> <url> <loc>http://domain.com/pag2</l...

В Microsoft Visio есть функция, позволяющая создавать карту сайта для существующего веб-сайта. Тем не менее, мой веб-сайт имеет логин и пользователи должны пройти проверку подлинности для просмотра содержимого. Есть ли способ ввести учетные данные в Visio или предоставить Visio аутентифицированный и...

Хорошо, в настоящее время мы запрещаем индексировать каталог / Assets / в нашем файле robots.txt. В каталоге / Assets / есть один каталог, который я хочу проиндексировать (/ Assets / product_labels /). Есть ли способ разрешить этот один каталог, кроме перемещения его в другой каталог?