Общее описание:
Требуется высокопроизводительные парсер, собирающий информацию по постам и блогерам TikTok. Желательно, чтобы парсер был разработан на Python.
- Режим 1. Парсинг информации о публикации по ссылке, со следующими метриками:
Ссылка, ссылка на блогера, кол-во просмотров, кол-во лайков, кол-во комментариев, дата публикации
- Режим 2. Парсинг информации о блогере, со следующими метриками: Имя блогера, ссылка на блогера, кол-во подписчиков. Парсинг всех постов блогера до определённой даты (например Парсинг до «2024-09-12») с метриками из режима 1.
- Сохранение всех спаршенных данных в табличку mongodb или postgresql.
- Возможность добавлять задания на парсинг через базу данных, предпочтительно monogodb. То есть возможность добавить документ/строку с ссылкой на пост или на блогера, для добавления задачи в очередь на парсинг.
- Возможность спарсить информации и все посты для 100к блогеров, за период в неделю, не медленнее чем за 3 дня работы парсера.
- Стабильная работа
- Система логиро...
Видеть полную информацию и оставлять заявки могут только авторизованные пользователи.
Нам нужен высокопроизводительный парсер для сбора информации о постах и блогерах TikTok, который должен быть разработан на Python. Парсер должен иметь два режима: первый — для сбора данных о публикации по ссылке (включая количество просмотров, лайков, комментариев и дату публикации), второй — для сбора данных о блогере (включая имя, количество подписчиков и все посты до определенной даты). Все собранные данные должны сохраняться в базе данных MongoDB или PostgreSQL. Также необходимо предусмотреть возможность добавления заданий на парсинг через базу данных, предпочтительно MongoDB, и обеспечить парсинг информации для 100 тысяч блогеров в течение трех дней. Парсер должен быть стабильным, с системой логирования и возможностью деплоя через Docker.
Для реализации этого задания потребуются навыки в области веб-скрапинга, работы с API, знания Python, опыт работы с базами данных MongoDB и PostgreSQL, а также навыки в контейнеризации с использованием Docker. Необходим специалист с опытом в разработке высокопроизводительных парсеров, обладающий знаниями в области работы с веб-технологиями и базами данных, а также опытом в развертывании приложений с использованием Docker.
Основная специализация: Веб-разработка и Продуктовый дизайн
Добрый день! Готовы разработать высокопроизводительный парсер TikTok с требуемым функционалом.
Техническое решение:
· Python + асинхронные запросы (aiohttp)
· Очередь задач через MongoDB
· Парсинг через мобильные API эндпоинты
· Docker-контейнеризация
· Прокси-ротация и антидетек
Уточняющие вопросы:
1. Какой тип базы предпочтителен - MongoDB или PostgreSQL?
2. Нужна ли система управления через веб-интерфейс или только API?
Готовы приступить к разработке. Напишите нам в Telegram!
Готов взяться за разработку парсера для TikTok. У меня есть успешный опыт создания высоконагруженных парсеров на Python с использованием MongoDB для хранения и управления очередями задач. Работал с Docker-контейнеризацией подобных решений.
Ваши требования по производительности (100к блогеров за 3 дня) реализуемы через грамотное распределение нагрузки и асинхронную обработку. Система логирования и отказоустойчивость будут реализованы на профессиональном уровне.
Давайте обсудим технические детали и особенности реализации - это поможет точнее оценить сроки и бюджет проекта. Буду рад пообщаться в Telegram (https://t.me/therebro) или VK (https://vk.com/therebro), где смогу подробнее рассказать о предлагаемом решении.
Привет!
Я — опытный разработчик с многолетним стажем в Python. Пишу скрипты, сайты, парсеры, телеграм-ботов, десктопные утилиты и многое другое. Также разрабатываю андроид-приложения.
Что я предлагаю:
• Быстрое и КАЧЕСТВЕННОЕ выполнение задач
• Адекватную обратную связь 12/7(когда не сплю)
• Помощь с запуском, настройкой и разъяснением работы проекта
• Честный подход и соблюдение сроков
Всегда за Безопасную Сделку
Портфолио: https://ochistka35.wixsite.com/daichasportfolio
Telegram для связи: https://t.me/daicha_helper_bot (прошу писать, онли в тг)
Парсер TikTok под ключ (Python). Два режима: по посту (просмотры/лайки/комменты/дата) и по блогеру (имя/ссылка/подписчики + все посты до заданной даты). Запись в MongoDB/PostgreSQL, постановка задач через БД (очередь), подробное логирование и деплой в Docker.
Готов обсудить детали и стартовать.
Здравствуйте! У меня отличный опыт в разработке парсеров самой разной сложности.
Сфокусированность: Специализируюсь на автоматизации бизнес-процессов, таких как продажи и системы уведомлений.
Задачи: Решаю задачи по сбору данных и интеграции с внешними сервисами.
Опыт:
Разработка на Python 3.13 для автоматизации различных функций (например, заказы, отчеты).
Создание скриптов со сложной логикой и взаимодействием с другими системами.
Понимаю специфику Telegram API и принципы создания удобных пользовательских интерфейсов (UI).
Технологии, которыми я владею:
Язык программирования: Python 3.13
ORM для работы с базами данных: SqlAlchemy
Фреймворки для автоматизации: Pytest и Pandas
Фреймворки для парсинга: request, BeautifulSoup
Работа с платежными API: Интеграция с API Юкассы (yookassa) для обработки транзакций.
Использование REST API: Делаю интеграции с внешними сервисами через RESTful API (например, Postgre SQL).
База данных: Работал с PostgresSQL.
Мои проекты: Примеры моей работы можно посмотреть на GitHub: https://github.com/vladushkov11-lab/resume.git
Контакты:
Много лет пишу парсеры, умею обходить защиты, работать с прокси и подменой данных. Работал с Авито, Wildberries, Booking, Binance, TikTok и другими. Готов взяться за вашу задачу, смогу реализовать все учитывая ваши требования. Пишите в телеграм, обсудим детали и приступим к работе.
Кейсы:
1) Парсинг объектов недвижимости по критериям с сайта Fazwaz AE.
https://disk.yandex.ru/d/tMpvIX7Q0u15bQ
2) Реализован парсер профилей исполнителей на сайте Fiverr с возможностью подгрузки их резюме и работ из портфолио.
https://www.fiverr.com
3) Парсинг более 94 тыс. парфюмерных товаров с сайта Aromo.
https://aromo.ru/perfumes/guerlain/royal-extract-ii/
Всегда на связи с 8:00 до полуночи, включая выходные.
Гарантирую качество работы. Поддерживаю проекты годами, без абонентской платы.
(FL.RU+Wamp+zenno (обяз))Здравствуйте, готовы предложить вариант решения вашей задачи. Большой опыт (с 2012 года) в создании веб-проектов любой степени сложности.
---
Работаем по официальному договору от имени юридического лица (ООО) по ТЗ.
---
Реализуем ваш проект используя стек LAMP/WAMP (Linux/Windows, Apache, Mysql, PHP).
Также, ваш проект необходимо реализовывать с использованием эмуляции человеческих действий в браузере. Это необходимо для обхода возможных блокировок (в процессе совершения действий на сайте, где будет проводиться автоматизация действий) со стороны антибот-системы, установленной на сайте.
В качестве системы, имеющей готовые инструменты для эмуляции человеческих действий в браузере будет использоваться программный комплекс ZennoPoster. А именно: бесплатный модуль ZennoBox. Более подробная информация о ZennoBox: https://zennolab.atlassian.net/wiki/spaces/RU/pages/495386651/ZennoBox?id=ru:zennobox
ZennoBox будет работать параллельно с основной программной системой, реализованной на стеке LAMP/WAMP.
В результате вы получите веб-приложение, доступное через админ-панель, которое будет управлять автоматизацией на сайте tiktok, совершая действия (выполнение кликов мышью, перемещение курсора, нажатие клавиш на клавиатуре, парсинг и другие действия) с использованием эмуляции человеческих действий в браузере. Обработку, хранение и отображение информации, полученной в результате выполнения действий на сайте, будет реализовывать стек WAMP (Windows, Apache, MySQL, PHP). Веб-интерфейс приложения будет разработан на базе HTML/CSS+JavaScript (Ajax).
---
Примеры разработанных проектов, использующих парсинг с применением эмуляции человеческих действий в браузере, имеются у нас в портфолио.
Портфолио (юр лицо (ООО) подтверждено):
https://www.fl.ru/users/isawebtech/portfolio/
Напишите мне, пожалуйста, на почту: срок сдачи работы, тз, контакты, через которые можно с вами связаться для уточнения моментов по поводу работы: flexpex15@mail.ru
Готов выполнить проект с полной реализацией всех требований за 14 дней стоимостью 45 000 рублей. Реализую парсер на Python с асинхронной архитектурой для максимальной производительности. Парсер будет работать в двух режимах: сбор информации по отдельным публикациям и комплексный парсинг блогеров с историей постов до указанной даты. Обеспечу обработку 100 000 блогеров за 72 часа с метриками просмотров, лайков, комментариев и подписчиков. Интегрирую систему очередей заданий через MongoDB с возможностью добавления ссылок на парсинг через базу данных. Все данные будут сохраняться в PostgreSQL или MongoDB с структурированным логированием. Реализую полную контейнеризацию через Docker для простого деплоя и развертывания. Включаю техническую документацию и 30 дней поддержки после сдачи проекта. Готов приступить к работе сразу и продемонстрировать аналогичные решения.
16:59 01.11.25
Для каких именно задач вы собираете данные? Это маркетинговый анализ, поиск лидов, мониторинг конкурентов или что-то другое? Понимание цели поможет точнее настроить приоритеты при сборе метрик.
Могу разработать высокопроизводительный TikTok-парсер на Python с двумя режимами:
1) парсинг публикаций по ссылке,
2) парсинг профиля блогера с выборкой постов до указанной даты.
Предлагаемая архитектура:
— Backend на FastAPI для управления заданиями.
— Асинхронный парсер (aiohttp или Playwright для стабильного обхода ограничений TikTok).
— Очереди заданий (Celery + Redis) для масштабирования и параллельной обработки.
— Сохранение данных в PostgreSQL или MongoDB (по вашему выбору).
— Контроль производительности: пакеты задач, rate-limit менеджер, поддержка прокси.
— Полное логирование процесса и ошибок.
— Сборка и развертывание через Docker.
Производительность:
Архитектура рассчитана на обработку до 100k блогеров за период в несколько дней за счёт очередей и параллельных worker-процессов.
Результат:
— Набор API-эндпоинтов для добавления задач.
— Очередь обработки и контроль статуса.
— База с чистыми структурированными данными.
— Логи, подсистема мониторинга, Docker-окружение.
Готов обсудить детали, метрики и требования к скорости, чтобы оценить точные сроки и бюджет.
11:26 26.11.25
Подскажите, пожалуйста:
1) Какой формат входных данных ожидается для массового запуска (список ссылок, список ID, excel/CSV)?
2) Парсинг предполагается строго web-scraping, или есть доступ к официальному TikTok API?
3) Какой объём данных нужно обрабатывать ежедневно в производственном режиме?
4) Какой тип базы предпочтительнее — PostgreSQL или MongoDB?
Сделаю быстрый парсер под ваши требования. Опыт 5 лет, знаю:
• Asyncio/aiohttp для скорости (100к блогеров за 3 дня)
• PostgreSQL/MongoDB для хранения
• Docker для деплоя
• Очереди задач (Celery/Redis)
• Прокси-ротация и стабильность
Полный цикл разработки: от архитектуры до деплоя через Docker
Срок: 10-26 дней (примерно)
Цена: 2500-3500 (обсуждаемо)
Готов начать сразу. Примеры кода покажу.
Телеграмм - @Meivandu
Оставлять заявки могут только авторизованные пользователи.
Парсер контента Тикток
Реклама
Парсер контента Тикток
Общее описание:
Требуется высокопроизводительные парсер, собирающий информацию по постам и блогерам TikTok. Желательно, чтобы парсер был разработан на Python.
- Режим 1. Парсинг информации о публикации по ссылке, со следующими метриками:
Ссылка, ссылка на блогера, кол-во просмотров, кол-во лайков, кол-во комментариев, дата публикации
- Режим 2. Парсинг информации о блогере, со следующими метриками: Имя блогера, ссылка на блогера, кол-во подписчиков. Парсинг всех постов блогера до определённой даты (например Парсинг до «2024-09-12») с метриками из режима 1.
- Сохранение всех спаршенных данных в табличку mongodb или postgresql.
- Возможность добавлять задания на парсинг через базу данных, предпочтительно monogodb. То есть возможность добавить документ/строку с ссылкой на пост или на блогера, для добавления задачи в очередь на парсинг.
- Возможность спарсить информации и все посты для 100к блогеров, за период в неделю, не медленнее чем за 3 дня работы парсера.
- Стабильная работа
- Система логиро...