Ограничения и этика

Парсинг - серая зона. Перед началом проверьте, что вы не нарушаете правила сайта и закон.

Что проверить

• robots.txt и пользовательское соглашение сайта.
• Не собирайте персональные данные без законного основания.
• Не обходите капчу и защиту от ботов.
• Не создавайте нагрузку: делайте паузы, ограничьте число запросов.

Порядок работы

1. Спросите у покупателя, зачем нужны данные и откуда.
2. Откажитесь от задач, где данные - личные или закрытые.
3. Укажите ограничения в описании услуги.

Типичные ошибки

• Обещать «спарсить что угодно».
• Игнорировать блокировки и пытаться их обходить.

Чек-лист

• Источник данных допустим
• Нагрузка ограничена
• Покупатель знает о рисках