Александр
  • Краснодар
  • Программирование и IT
  • Работ в портфолио: 50
  • Отзывы: 28

    Претензии: 0

  • Зарегистрирован: 27.01.2011
  • Был на сайте: 09.10.2019 (14:46)
 
{безопасная сделка}

Парсер закупок 

Дата публикации: 2015-06-06 11:30:14
Просмотров: 55
Парсит сайт zakupki.gov.ru

Формирование огромной базы данных закупок
Все закупки сохраняются в базу данных MySQL. Информации очень много, размер базы данных исчисляется гигабайтами

Изощренные алгоритмы повышения производительности
Вследствие большого количества информации разработаны специальные алгоритмы повышения производительности - выполнение парсинга в несколько сотен потоков, оптимизация SQL-запросов и т.д.

Удобный менеджер прокси
Управление списком из тысяч прокси организован в удобном интерфейсе с гибкими настройками
Файлы
ФайлКомментарий / предпросмотр
Имя:ZakupkiParser2.png
Размер:109.97КБ (112610)
Тип: PNG image data, 1600 x 800, 8-bit/color RGBA, non-interlaced
Скачать
Имя:ZakupkiParser3.png
Размер:151.87КБ (155521)
Тип: PNG image data, 1600 x 800, 8-bit/color RGBA, non-interlaced
Скачать
Пожаловаться
Комментариев нет
оставить комментарий могут только авторизованные пользователи