Архитектура решения: Проведение юридической экспертизы веб-парсинга

В этой статье мы поделимся с вами пошаговым процессом юридической экспертизы каждого проекта, связанного с веб-парсингом

Для того чтобы архитектура вашего решения соответствовала как законодательным нормам, так и лучшим отраслевым практикам, мы составили контрольный список для удобства и защиты репутации и целостности веб-парсинга как практики. Регулирование персональных и коммерческих данных постоянно меняется во всем мире, и, учитывая международный характер Интернета, создание четкой юридической практики в ваших решениях должно считаться приоритетной задачей.

В этой статье мы рассмотрим три важнейшие юридические проверки, которые необходимо провести при анализе юридической целесообразности любого проекта по сбору данных с веб-сайтов, а также вопросы, которые следует задавать себе при планировании работ по сбору данных.

Предварительная проверка: Определите цель использования

Данные бывают разных форм и размеров. Однако прежде чем приступить к извлечению этих данных, необходимо определить точный статус и законность их извлечения для каждого проекта.

Существуют три формы данных, извлечение которых может представлять юридический риск:

  1. Персональные данные
  2. Данные, защищенные авторским правом
  3. Данные, скрывающиеся за логином.

Однако первым шагом в процессе юридической проверки является определение сценария использования данных - т.е. для чего они будут использоваться, и есть ли у вас явное согласие владельцев данных на их извлечение, хранение и использование.

Конечная цель использования данных может существенно повлиять на правовой статус парсинга данных с веб-сайта, особенно в случае персональных данных, о которых мы поговорим позже.

Поэтому первым шагом любого процесса юридической экспертизы является определение:

  1. Для чего вы будете использовать эти данные?
  2. Кому принадлежат эти данные? Сайту, отдельному человеку, никому и т.д.
  3. Есть ли у вас разрешение владельца данных на их извлечение?

После того как все это будет определено, вы сможете провести юридическую проверку.

Проверка № 1 - Персональные данные

Персональные данные, или, как их еще называют, персонально идентифицируемая информация (PII), - это любые данные, которые могут быть использованы для прямой или косвенной идентификации конкретного человека. С ростом осведомленности о том, как используются персональные данные, извлечение персональных данных привело к вступлению в силу все более строгих правил защиты данных - ярким примером является Общее положение о защите данных, или GDPR.

Прежде всего необходимо проверить, планируете ли вы извлекать персональные данные в какой-либо форме. К числу распространенных примеров относятся:

  • Имя
  • Электронная почта
  • номер телефона
  • Адрес
  • Имя пользователя
  • IP-адрес
  • Дата рождения
  • Информация о работе
  • Информация о банке или кредитной карте
  • Медицинские данные
  • Биометрические данные

Если вы не извлекаете никаких персональных данных, то можно переходить к следующему этапу юридической проверки. Однако если вы извлекаете какие-либо из перечисленных выше типов персональных данных, то вам необходимо изучить правила защиты информации, связанные с этими данными.

Проверка №2 - Данные, защищенные авторским правом

Данные, защищенные авторским правом, обычно описывают содержимое, принадлежащее юридическим и физическим лицам, которые имеют четкий контроль над их воспроизведением и захватом. То, что веб-данные находятся в открытом доступе в Интернете, не означает, что их может извлекать и хранить любой желающий.

В некоторых случаях сами данные могут быть защищены авторским правом, и в зависимости от того, как/какие данные вы извлекаете, вы можете быть уличены в нарушении авторских прав владельца, что создает дополнительные риски для пользователей этих данных.

Прежде всего, необходимо проверить, не планируете ли вы извлекать данные в любой форме, которая может быть защищена авторским правом. Распространенными примерами являются:

  • Статьи
  • видеоролики
  • Изображения
  • Истории
  • Музыка
  • Базы данных

Если вы извлекаете какие-либо из этих форм веб-данных, то вам необходимо определить, не нарушите ли вы авторские права, извлекая и используя эти данные в своих проектах.

Подобные случаи необходимо оценивать в каждом конкретном случае, поскольку проблемы с авторским правом часто не являются черно-белыми, как в случае с персональными данными, и иногда их можно преодолеть, если в вашем случае есть обоснованное исключение из авторского права. Для этого существуют следующие методы:

  • Добросовестное использование: Например, вместо того чтобы извлекать все данные из статьи, вы извлекаете короткие фрагменты, что может считаться добросовестным использованием.
  • Факты: Факты, как правило, не подпадают под действие законов об авторском праве, поэтому, если фирмы ограничатся только фактическими данными, т.е. названиями продуктов, ценами и т.д., то это может быть допустимо без нарушения авторских прав.

Права на базы данных

Права на базы данных - это подмножество авторского права, которое требует отдельного пояснения. База данных - это организованная коллекция материалов, позволяющая пользователю осуществлять поиск и доступ к отдельным фрагментам информации, содержащейся в этих материалах.

Права на базу данных могут создавать дополнительные риски при использовании веб-данных в ваших проектах, если эти данные не были извлечены соответствующим образом.

В США база данных защищена авторским правом, если ее подбор или расположение являются оригинальными и творческими. Авторское право защищает только подбор и организацию данных, но не сами данные.

В ЕС базы данных охраняются в соответствии с Директивой о базах данных, которая обеспечивает гораздо более широкую защиту баз данных ЕС. Директива преследует две цели: (1) защита ИС, как в США, и (2) защита труда и риска при создании базы данных.

Если вы считаете, что источник данных может подпадать под действие прав на базы данных, то лица, принимающие решения, должны обязательно проконсультироваться со своими юристами, прежде чем приступать к парсингу данных, и убедиться, что они либо:

  • только парсить часть имеющихся данных;
  • парсить только сами данные и не копировать их организацию; и
  • постараться ограничить объем парсируемых данных фактическими или другими данными, не защищенными авторским правом.

Авторское право может быть сложной темой, поэтому всегда лучше проконсультироваться с квалифицированным юристом, прежде чем использовать в своих проектах данные, которые могут быть защищены авторским правом.

Проверка № 3 - Данные за логином

Извлечение данных с веб-сайта, на котором для доступа к данным сначала требуется войти в систему, может вызвать потенциальные юридические проблемы. В большинстве случаев для входа в систему требуется согласиться с условиями и положениями сайта, в которых может быть прямо указано, что автоматический парсинг данных запрещен.

В этом случае необходимо просмотреть условия и положения, чтобы определить, не нарушаете ли вы их, парся данные с сайта. Поскольку условия использования некоторых сайтов могут быть весьма запутанными, рекомендуется, чтобы перед парсингом данных из-под логина пользователя их изучил опытный специалист в области права.

Наша рекомендация

Для того чтобы соответствовать современным требованиям к защите данных, очень важно постоянно обновлять информацию, предоставляемую юридическим отделом, и обеспечивать регулярный контроль за работой специалистов по защите данных. Юридические проверки являются неотъемлемой частью соблюдения требований законодательства и демонстрируют добрую волю. Кроме того, последовательная юридическая оценка проектов позволяет оптимизировать процесс парсинга и быть абсолютно уверенным в том, что парсинг остается уважительным и продуктивным.