Етичний статус веб-скрейпінгу з сайтами проксі-серверів

Зміст:

1. Що потрібно знати про етичний скрейпінг з орендою проксі
2. Як дозволено застосовувати приватні відомості
3. Як місцеве законодавство регулює скрейпінг

Користувачі звертаються до Dexodata у 2023 році, щоб спробувати проксі безкоштовно або купити проксі. Частою метою — автоматизований збір даних в Мережі за допомогою інструментів на основі штучного інтелекту навіть без знань у галузі програмування. Наша служба підтримки клієнтів часто відповідає на питання, чи є законною та етичною така процедура. Як компанія, що пропонує проксі-сервери з хорошою швидкістю з білих списків і діє відповідно до норм KYC та AML, пропонуємо огляд цієї теми.

Що потрібно знати про етичний скрейпінг з орендою проксі

Конкретний статус автоматизованого збору даних в Інтернеті залежить від юрисдикції. У глобальній Мережі масштабне отримання веб-даних не порушує законів. Важливо те, звідки ви витягуєте інформацію і з якими цілями:

• Якщо інформація, яку ви збираєте за допомогою проксі-сайтів, є загальнодоступною (наприклад, ціни, котирування та обмінні курси, дані про погоду тощо), то немає перешкод для запуску алгоритмів на основі ШІ або стандартного коду;

• Коли йдеться про приватні дані користувачів, базова умова — чи є згода на отримання та обробку інформації. Йдеться про угоду користувача, з якою користувачі погоджуються під час реєстрації акаунтів і політику cookies веб-сторінок та мобільних додатків. Використання сервісів означає згоду на збір і зберігання наданих відомостей, таких як IP або адреса електронної пошти. У цьому випадку також немає проблеми з етичністю збору відомостей, в тому числі через онлайн-інструменти на базі ШІ.

 

Як дозволено застосовувати приватні відомості

 

Потенційно однієї IP-адреси може вистачити для того, щоб пов'язати абстрактний акаунт з певною людиною. У цьому випадку збір даних може розглядатися як порушення. Зазначимо, що це рідкісний випадок у світовій практиці. Загальна позиція законодавців щодо роботи з інформацією через проксі-сервери з хорошою швидкістю у 2023 році така: дані не відносяться до розряду особистих, якщо не містять точних ідентифікаторів, наприклад, імен з телефонними номерами.

Іншими словами, пошук, завантаження та обробка такої інформації дозволені, якщо потрібні додаткові кроки, щоб пов'язати анонімні дані з реальною людиною. Підсумовуючи, зазначимо, що дані етично збирати, коли вони загальнодоступні і не належать до відомостей, що дозволяють однозначно ідентифікувати конкретну особу.

Існують ще два правила, важливі з юридичної та етичної точок зору:

1. Дані, отримані шляхом автоматизованого збору веб-даних, не повинні використовуватися в деструктивних цілях. До таких відносять шантаж, шахрайство тощо. Вони незаконні, на відміну від бізнес-аналітики та оптимізації ланцюга постачання за допомогою програмних рішень на базі ШІ.
2. Процес отримання інформації в Мережі не повинен завдавати прямої шкоди веб-сайту або бізнесу, дані про який ви збираєте. Стремління перевершити конкурента в добросовісній конкуренції не завдає йому прямої шкоди. Інша справа — спроби порушити роботу ресурсу або пошкодити архітектуру підмереж шляхом DDoS-атаки. Це — пряма шкода.

 

Як місцеве законодавство регулює скрейпінг

 

Екосистема для аналітики мережевих даних Dexodata пропонує спробувати проксі безкоштовно або купити проксі-сервери з хорошою швидкістю з геолокацією в 100+ країнах. Для збору даних у окремих регіонах ситуація буде такою:

• В РФ парсинг законний, але загальнодоступні персональні дані збирати не можна;
• В США федеральне законодавство не забороняє автоматизоване сканування сайтів/додатків та отримання певних категорій інформації. При цьому повинні дотримуватися дві умови:
  • Дозвіл поширюється лише на загальнодоступну інформацію;
  • Алгоритми не завдають шкоди цільовим веб-сторінкам;
• В Європейському Союзі підтверджено, що «воспроизведение общедоступного контента» не порушує закон. Все в порядку, якщо на кону не стоять конфіденційні особисті дані.

Підсумовуючи, зазначимо, що платформа для збору даних у корпоративному масштабі Dexodata рада співпраці з етичними компаніями. Звертайтеся, щоб спробувати проксі безкоштовно або купити проксі для безперебійного швидкісного збору веб-інформації. Наші проксі-сервери з хорошою швидкістю у 2023 році працюють за передоплатою пакетів трафіку з динамічною зміною IP та вибором пулів потрібних вам міст, дата-центрів, провайдерів домашнього або мобільного інтернету.