Twip battle - SEO Аудит Сайта - VS - Web scraping -

Аудит сайта

Метаданные

Дублирующий контен

Некорректные редиректы

Зеркала сайта

Спам тексты

Процент уникальности страниц/текстов

Robots.txt и Sitemap.xml

Битые ссылки

Навигация (хлебные крошки)

Ошибки перелинковки

Скорость загрузки сайта

Прочие факторы которые влияют на SEO

Автоматическое извлечение данных, сбор информации из интернета. Создание программ для повторного выполнения подобных работ. Поиск.

Помещение результата в Excel, Access, SQL базы данных.