1.96 – Самый быстрый поиск авто. Ускорение работы в 100 раз и более.
|| 8 января 2014, 21:43
    

Самый быстрый поиск авто. Ускорение работы в 100 раз и более.

edrom_update_1.96.zip [3,84 Mb] Обновление 1.96 от 8/01/2014 23:30:00 (версия не актуальна). Описание основных изменений:  

1. За счет реализации нового алгоритма работы – режима «Поиск только новых объявлений» (при обработке запросов к страницам с результатами поиска) мониторинг в реальном времени ускорен до 100 раз и более. Новый режим работы устанавливается при задании нового запроса или редактировании существующего, см.рисунок:

Новый режим работы ¬– «Поиск только новых объявлений»

Существовавший ранее единственный алгоритм работы, для которого не было отдельного наименования (в новой версии он назван режимом­ «Поиск всех объявлений»), позволял производить не только поиск новых объявлений, но и осуществлять проверку изменения цен в объявлениях, размещенных ранее и уже найденных программой. Недостатком этого режима являются значительные затраты времени, связанные с необходимостью загрузки страниц с одними и теми же объявлениями. Эта проблема проявляется особенно наглядно при работе с сайтами, на которых не предусмотрено сортировки объявлений по дате добавления.

Реализованный в обновленной версии режим «Поиск только новых объявлений» позволяет уже не терять время на загрузку страниц с результатами поиска, где размещены уже известные программе объявления, а загружать только страницы с новыми.  В результате это удалось достичь существенного прироста скорости мониторинга, прежде всего для таких крупных регионов, как Москва и область, Спб и область.

К примеру, в более ранних версиях программы мониторинг по всему рынку (Автомобили Москва. Realtime Monitoring) занимал 5-10 минут, в обновленной версии мониторинг по всему рынку занимает в среднем всего 5-10 секунд! После обновления для ускорения работы необходимо отредактировать настройки поиска или же скачать обновленные настройки. 

2. Второе главное изменение связано с возможностью задания параметров поиска одновременно для всех сайтов. Это коренным образом упрощает настройку программы на поиск определенных марок, моделей, по диапазону цен и т.д. При этом, если программа работает в новом режиме «Поиск только новых объявлений», время на мониторинг не зависит от количества моделей автомобилей в поиске и в среднем составляет всего 5-10 сек! Если программа настроена на нужный регион, больше нет необходимости формировать отдельные условия поиска (за редкими исключениями), а достаточно в настройках программы (Главное меню\Сервис\Параметры мониторинга\вкладка Фильтр II) отметить условия выборки объявлений, см. рисунок:

Новый фильтр на выборку объявлений

Новый фильтр позволяет не только реализовывать выборку по конкретным маркам автомобилей, но и в чем-то дополняет (заменяет) статистику цен. Например, в приведенном выше примере осуществляется фильтрация объявлений с ценами, которые выше установленных с помощью фильтра на Toyota Camry 2006-2009 г.

Поддерживается поиск редких марок/моделей (которые отсутствуют в базе программы), поиск по стране происхождения транспортных средств (отечественные/иностранные автомобили), поиск по диапазону цен, по году выпуска и другие комбинации.

Подробнее возможности и настройки нового фильтра рассматриваются в отдельном описании Задание параметров поиска автомобилей одновременно для всех сайтов объявлений

3. Для того, чтобы упростить редактирование существующих настроек поиска и перевод их в новый режим «Поиск только новых объявлений», реализована поддержка группового изменения свойств в редакторе HTTP-запросов. Можно выделить сразу несколько запросов и изменить их свойства, см. рисунок:

Выделение сразу нескольких запросов

Для выделения нескольких строк следует удерживать клавишу Shift. После выделения группы запросов и нажатия контекстного меню «Редактировать»  открывается диалоговое окно «Редактора запросов», в котором можно изменить следующие параметры: 1) комментарий; 2) алгоритм работы; 3) периодичность; 4) включение/отключение поиска. См. рисунок:

Изменение параметров сразу нескольких запросов
Параметр «Периодичность» в режиме поиска только новых объявлений не доступен для редактирования  и его значение всегда равно «1» (хотя все же допускается установка и других значений, если необходимо снизить частоту запросов).

4. Для работы в режиме «Поиск только новых объявлений» добавлен новый режим мониторинга (с загрузкой всех страниц), когда производится последовательная загрузка всех страниц (даже несмотря на то, что на них не найдено новых объявлений), см. рисунок:

Новый режим мониторинга (с загрузкой всех страниц)

Загрузка всех страниц осуществляется только при первом старте мониторинга.

5. Добавлены новые виды сортировки по столбцам: «др.объяв.» (счетчик других объявлений) и «Результаты анализа», что позволяет, к примеру, быстрее работать с объявлениями, размещенными с отметкой «ВПЕРВЫЕ», см. рисунок:

Новые виды сортировки
 

6. Реализована функция сортировки всего списка удаленных объявлений через Главное меню\Сервис\Параметры мониторинга\вкладка «Сортировка», см. рисунок:

Сортировка всего списка удаленных объявлений
 

7. В строке состояния отображается количество объявлений, поставленных в очередь на загрузку, см. рисунок:

Отображение количества объявлений, поставленных в очередь на загрузку
 

8. Реализована корректная работа счетчика уникальных объявлений и объявлений, поданных впервые, при анализе в фоновом режиме, см. рисунок:

Реализована корректная работа счетчика при анализе в фоновом режиме
 

9. При завершении работы программы, если остались объявления, для которых не завершен анализ, открывается диалоговое окно, позволяющее впоследствии снова найти эти объявления при следующем старте мониторинга (что позволит продолжить их анализ), см. рисунок:

Диалоговое окно, позволяющее продолжить анализ объявлений при следующем запуске программы
 

10. В системах Windows 7, Windows 8 программа больше не требует администраторских прав для своего запуска. Удаление этого требования позволило, в частности, восстановить  функцию автозапуска программы в данных системах, см. рисунок:

Восстановление функции автозапуска в Windows 7, Windows 8

11. Реализована поддержка поиска только битых автомобилей на сайтах avito.ru и auto.ru. Для этого необходимо в редакторе запросов отметить сайт для поиска, например, – avito.ru (битые). См. рисунок:

Программа для поиска битых авто на avito.ru
 

12. Исправлена достаточно редкая ошибка, когда в результате нестабильного соединения с Интернет, мог произойти сбой в функции оповещения по email.

13. Исправлена достаточно редкая ошибка, когда мониторинг останавливался с сообщением в строке состояния «Запуск мониторинга. Ожидание завершение фонового потока…»

14. Исправлена достаточно редкая ошибка, когда могло поступать оповещение об объявлениях, которые не удовлетворяют условиям фильтров. 

15. Исправлены другие обнаруженные ошибки: неточное отображение пробега, ДВС, КПП на региональных разделах avito.ru и chance.ru в категории «Автомобили»,  восстановлена работа с autonavigator.ru, исправлена с mail.ru (мониторинг), a также ряд других ошибок. 

 

Обновленную версию рекомендуется установить со стр. http://edrom.ru/releases/6-download.html (без ключа и необходимости деинсталляции текущей версии).  

Также можно обновить условия поиска без дополнительной установки:

  Имя файла   Наименование настроек поиска
 [attachment=223]   Автомобили Москва. Realtime Monitoring 2014.fndx
 [attachment=224]  Автомобили Санкт-Петербург. Realtime Monitoring 2014.fndx 
 msk-crash-2014.zip [2,9 Kb]

 Битые авто Москва и обл 2014.fndx
 (добавлена поддержка avito.ru, irr.ru, yandex.ru, mail.ru)

 

Следует еще раз отметить, что данные настройки поиска являются оптимальными, независимо от цели, с которой работает программа:
1. Ведется мониторинг всего рынка;
2. Производится поиск всего одной-двух моделей автомобилей;
3. Ведется работа по сбору различных баз данных.
Чтобы удалить лишние данные из результатов поиска, необходимо (см. ссылку) 
использовать Фильтр II.

Обновленные настройки поиска для других регионов и версий по недвижимости - в соответствующих сборках.

 

 

 

 


Введите два слова, показанных на изображении:
Купить программу
Регионы и категории
Обратная связь
Справка
Разделы сайта
Архив
Поиск по сайту


Реклама
Теги