Всем привет! Очень часто мне попадаются на глаза вопросы в темах про SQLi Dumper о том что при импорте url в дампер со временем скорость импорта падает,программа начинает подтормаживать,выскакивает ошибка и программа закрывается и т.д и т.п. Многие из вас скажут что это баян,велосипед и давно все об этом в курсе-так что это не для вас.
Сейчас я наглядно покажу как этого можно избежать и как в принципе делаю я. Для начала нужно подготовить нашу базу URL для импорта:
1. Удаляем дубликаты ссылок.
2. Так же можно удалить и дубликаты самих доменов что существенно может сократить количество url- для этого я использую GScraperFree но это уже на ваше усмотрение так как бывает что в одном сайте попадаются несколько параметров и один из них может быть уязвим.
3.Далее нормализуем ссылки под SQLi Dumper с помощью Text Combine 0.5 by keegean что так же облегчит наш файл со ссылками.
4. Сверяем полученный файл со своей базой URL с помощью Arhivar (для тех у кого она имеется)
5. Ну и наконец идем в SQLi Dumper. Для того чтобы не ждать долго импорт просто копируем полученные ссылки в файл URL List если его нет то нужно создать.
Если ссылки более-менее нормализованы то через 1-2 минуты они уже готовы к работе.
При старте программа может подвиснуть-все зависит от количества ссылок. Ну и на этом пожалуй и все)))
P.S.: Не кидайтесь помидорками))))
P.S.S.: По просьбам трудящихся добавил ссылки на некоторые софты))))
Сейчас я наглядно покажу как этого можно избежать и как в принципе делаю я. Для начала нужно подготовить нашу базу URL для импорта:
1. Удаляем дубликаты ссылок.
2. Так же можно удалить и дубликаты самих доменов что существенно может сократить количество url- для этого я использую GScraperFree но это уже на ваше усмотрение так как бывает что в одном сайте попадаются несколько параметров и один из них может быть уязвим.
Пожалуйста,
Вход
или
Регистрация
для просмотра содержимого URL-адресов!
3.Далее нормализуем ссылки под SQLi Dumper с помощью Text Combine 0.5 by keegean что так же облегчит наш файл со ссылками.
Пожалуйста,
Вход
или
Регистрация
для просмотра содержимого URL-адресов!
4. Сверяем полученный файл со своей базой URL с помощью Arhivar (для тех у кого она имеется)
Пожалуйста,
Вход
или
Регистрация
для просмотра содержимого URL-адресов!
5. Ну и наконец идем в SQLi Dumper. Для того чтобы не ждать долго импорт просто копируем полученные ссылки в файл URL List если его нет то нужно создать.
Пожалуйста,
Вход
или
Регистрация
для просмотра содержимого URL-адресов!
Если ссылки более-менее нормализованы то через 1-2 минуты они уже готовы к работе.
Пожалуйста,
Вход
или
Регистрация
для просмотра содержимого URL-адресов!
При старте программа может подвиснуть-все зависит от количества ссылок. Ну и на этом пожалуй и все)))
P.S.: Не кидайтесь помидорками))))
P.S.S.: По просьбам трудящихся добавил ссылки на некоторые софты))))