Краулінг ШІ та ліцензування даних
Nakordoni.eu публікує дані про черги на кордоні в реальному часі, прогнози часу очікування та путівники, збір яких коштує нам грошей щохвилини щодня. Пошукові системи та ШІ-асистенти, що надсилають нам читачів, — вітаємо безкоштовно. Масовий краулінг, що забирає дані й нічого не повертає, — ні, для нього потрібна платна угода.
Хто може проводити краулінг без угоди
Пошукові системи
Google, Bing, Yandex, DuckDuckGo, Apple, Seznam та інші загальні пошукові краулери — вони надсилають нам читачів.
ШІ-асистенти, що посилаються на нас
Краулери ШІ-продуктів, що вказують джерело у своїх відповідях, — OpenAI, Google, Anthropic, Perplexity, Meta AI, Apple, Amazon, Cohere, You.com та подібні, включно з інструментами, що завантажують сторінку за запитом користувача.
Попередній перегляд посилань і перевірка реклами
Боти попереднього перегляду соцмереж і месенджерів, а також краулери перевірки якості реклами мереж, що показують нашу рекламу.
Наші партнери та клієнти API
Будь-хто, хто використовує документований API для розробників із ключем, у межах обраного плану.
Безкоштовний доступ усе одно означає: дотримуйтеся robots.txt, чесно ідентифікуйте себе через user-agent, не перевищуйте розумну частоту запитів і зберігайте атрибуцію та робоче посилання на сторінку-джерело. Використання назви краулера іншої компанії вважається зловживанням і блокується.
Що потребує платної угоди
- Збір наших сторінок чи даних для навчання, донавчання або оцінки моделі.
- Систематичне копіювання даних про черги, прогнозів, даних пунктів пропуску чи перевізників у власний продукт, набір даних або фід.
- Перепродаж, поширення чи публікація наших даних, із зазначенням нашої назви або без нього.
- Будь-який краулінг, достатньо інтенсивний, щоб впливати на наші сервери, або той, що приховується за фальшивим user-agent, резидентними проксі чи ротацією адрес.
Краулери цієї групи отримують HTTP 402 «Crawling not permitted» на кожен запит, доки не укладено угоду. Про них не зберігається нічого, крім лічильників, необхідних для контролю цього правила.
Як працює pay-per-crawl
Ми працюємо за моделлю pay-per-crawl: замість повної блокування краулінг оцінюється у вартості. Ви повідомляєте, які частини сайту вам потрібні та в якому обсязі, ми узгоджуємо ціну та спосіб оплати, і вашому краулеру відкривають доступ — або через підписану угоду й дозвіл для ваших верифікованих адрес, або через розрахунки pay-per-crawl від Cloudflare, якщо їх підтримує ваш оператор.
Для структурованого й надійного доступу більшості компаній краще підходить API для розробників: документовані ендпоінти, стабільні формати, вищі ліміти та підтримка — замість розбору HTML-сторінок. Відкрити портал розробника →
Запросити доступ
Напишіть нам через партнерську контактну форму, обравши «AI crawling / data licensing», або на partnerships@nakordoni.eu. Вкажіть вашу компанію, user-agent та адреси краулера, що вам потрібно і як часто, а також мету використання. Зазвичай ми відповідаємо протягом двох робочих днів.