Парсинг Prom, Rozetka і OLX: що можна отримати і як

З маркетплейсів збирають ціни й наявність конкурентів, асортимент категорії, характеристики товарів або власні оголошення для обліку. Перш ніж писати парсер, варто розібратися, які дані відкриває офіційний API, які доступні лише на публічних сторінках і де проходить межа персональних даних.

Оновлено:

Спершу — офіційний API

Усі три майданчики мають програмні інтерфейси, але вони створені для керування власним магазином чи оголошеннями, а не для читання даних інших продавців. Якщо задача стосується ваших товарів і замовлень, API майже завжди кращий за парсинг: він стабільніший і не ламається від зміни дизайну.

  • Синхронізація залишків і цін вашого магазину на Prom чи Rozetka, вивантаження замовлень у CRM — це задача інтеграції через API, а не парсингу.
  • Ціни та асортимент інших продавців через ці API не отримати — вони доступні лише на публічних сторінках.
МайданчикЩо дає офіційний APIДоступ
Prom.uaРобота з кабінетом вашої компанії: замовлення та їхні статуси, повідомлення, клієнти, товари та їх редагування, імпорт товарів.За унікальним ключем (токеном) вашої компанії, який передається в кожному запиті.
Rozetka МаркетплейсAPI для продавців: товари, замовлення, повідомлення, доставка, звіти вашого магазину.Вхід обліковим записом продавця маркетплейсу.
OLXOLX Group описує свій партнерський API як інструмент для публікації та керування оголошеннями від імені користувачів, які дали на це дозвіл, і прямо зазначає, що ринкових даних він не надає.Після схвалення заявки на доступ. Умови для olx.ua варто уточнити в самого OLX.

Що можна зібрати з публічних сторінок

Публічні сторінки товарів і категорій зазвичай містять дані, корисні для аналізу ринку:

  • Назва товару, ціна, стара ціна і знижка.
  • Наявність і варіанти доставки.
  • Характеристики, категорія, бренд.
  • Кількість відгуків і рейтинг товару.
  • Позиція товару у видачі категорії чи пошуку.

Персональні дані — окреме питання

Оголошення на OLX і сторінки продавців на маркетплейсах часто містять імена, телефони чи інші контакти людей. Це персональні дані, і їх ми без підстави не збираємо — навіть якщо вони технічно видні на сторінці.

Для аналізу ринку вони зазвичай і не потрібні: достатньо ціни, характеристик, категорії й регіону. Якщо задача вимагає контактів, спершу варто з'ясувати законну підставу для їх обробки.

Типові складнощі

Маркетплейси — складні джерела для парсингу. Зазвичай доводиться враховувати:

  • Обмеження частоти запитів і захист від автоматичного доступу. Збір має бути повільнішим і розподіленим у часі, з повторними спробами.
  • Дані, що підвантажуються через JavaScript. Іноді потрібен headless-браузер, а це дорожче в роботі.
  • Пагінація і фільтри: у великій категорії товари видно лише сторінками, а частину з них — тільки з певними фільтрами.
  • Часті зміни верстки. Парсер має повідомляти про збій, а не мовчки віддавати порожні дані.
  • Той самий товар у різних продавців. Для аналізу цін його треба зіставити — за кодом, артикулом або назвою з характеристиками.

Від чого залежить вартість

Парсинг і збір даних у нас — від 4 500 грн. Точну вартість називаємо після брифу. Основні чинники зведені в таблицю.

ЧинникЯк впливає
Кількість майданчиків і категорійКожен майданчик має свою структуру і обмеження; три майданчики — це майже три окремі парсери.
ОбсягСотні товарів і сотні тисяч товарів потребують різної інфраструктури: черг, сховища, моніторингу.
ЧастотаРазове вивантаження значно простіше за регулярний збір зі сповіщеннями про збої.
Зіставлення товарівПорівняння цін між продавцями чи з вашим асортиментом часто займає більше роботи, ніж сам збір.
Формат результатуФайл чи Google Sheets — найпростіше; дашборд або інтеграція з вашою системою додають роботи.
ПідтримкаВерстка змінюється, і парсер треба виправляти: у межах щомісячної підтримки (від 10 000 грн/міс) або погодинно (від 1 200 грн/год).

Що підготувати перед зверненням

Щоб оцінка була точною, а не «з запасом на невідоме», підготуйте:

  • Майданчики й категорії, по два-три посилання на типові сторінки.
  • Список полів, які потрібні, — найкраще у вигляді таблиці-прикладу.
  • Обсяг: скільки товарів чи оголошень приблизно.
  • Частоту оновлення і що ви робите з даними після кожного оновлення.
  • Чи продаєте ви на цих майданчиках самі — тоді частину задачі можна закрити офіційним API.
  • Куди має потрапляти результат.

Чи законний парсинг маркетплейсів

Збір загальнодоступних даних зазвичай допустимий, але залежить від умов використання конкретного сайту і типу даних. Персональні дані без підстави не збираємо; де є офіційний API — використовуємо його. Для чутливих випадків радимо окрему юридичну консультацію.

Часті питання

Чи можна отримати ціни конкурентів з Prom чи Rozetka через API?

Ні. Офіційні API цих майданчиків працюють з даними вашого власного магазину: товарами, замовленнями, повідомленнями. Ціни інших продавців доступні лише на публічних сторінках.

Чи збираєте ви контакти продавців з OLX?

Персональні дані без підстави не збираємо. Для аналізу ринку зазвичай достатньо цін, характеристик, категорій і регіонів.

Скільки коштує парсинг маркетплейсу?

Від 4 500 грн. Вартість залежить від кількості майданчиків і категорій, обсягу, частоти оновлення і формату результату.

Пов'язана послуга

Парсинг і збір даних

Беремо задачу під ключ: розбираємо ваші процеси, робимо і запускаємо рішення, а потім підтримуємо його.

Вартість
від 4 500 грн

Розкажіть про вашу задачу

Перша консультація безкоштовна. Відповідь протягом 24 годин.

Орієнтовний бюджет (необов'язково)

Не хочете заповнювати форму? Написати в Telegram

Розкажіть про вашу задачу

Перша консультація безкоштовна. Відповідь протягом 24 годин.

Орієнтовний бюджет (необов'язково)

Не хочете заповнювати форму? Написати в Telegram