Что входит в сбор, а что нет
Беру публичное содержимое открытых групп: посты, даты, счётчики, ссылки и описание самой группы. Не выгружаю участников, их профили, возраст, город и контакты. Это персональные данные, и работать с ними без законных оснований нельзя.
Если нужен анализ активности, авторов комментариев можно заменить обезличенными номерами. Видно, сколько человек участвует в обсуждении, но без привязки к людям.
- тексты и даты постов открытой группы
- классы, комментарии, репосты
- ссылки и тип вложений
- описание и ссылка группы, число участников из шапки
- выборка по ключевым словам
Для чего это нужно
Одноклассники остаются площадкой с сильной аудиторией старшего возраста, и многие товары и услуги продвигают именно там. Выгрузка помогает понять, что работает в нише: какие посты собирают реакции, как часто конкуренты публикуют и о чём спрашивают в комментариях.
Отдельная задача это поиск упоминаний. Если вы продаёте товар, можно найти публичные обсуждения в группах и понять, какие вопросы повторяются.
Подводные камни источника
Закрытые группы и страницы людей недоступны без вступления, их не трогаю. Часть открытого содержимого сайт показывает гостям в усечённом виде, и полная лента может требовать входа. Что доступно без входа по вашему списку групп, я проверяю до начала работы и честно говорю о результате.
Лента подгружается при прокрутке, поэтому простые способы скачивания страницы дают лишь начало. Я работаю с динамическими страницами и пагинацией, чтобы собрать нужный период.
Автоматический парсер может раз в неделю дополнять таблицу новыми постами и обновлять счётчики.
Пара особенностей площадки: отметки «нравится» здесь называются классами, а пост группы в адресе называется темой (ok.ru/group/номер/topic/номер). По этому адресу удобно сверять посты между срезами.
Для оценки пришлите ссылки на группы, период и скажите, нужны ли тексты комментариев.