Что именно собираю из канала
Основа выгрузки это публичные посты. Для каждого фиксирую идентификатор, дату, текст, форматирование, ссылки внутри текста, тип вложения (фото, видео, файл, опрос) и открытые счётчики. Если пост переслан из другого канала, отмечаю источник пересылки, и по таблице видно, кто у кого заимствует материалы.
У каждого поста в канале порядковый номер, он виден в ссылке вида t.me/example_coffee/1234. Пропуски в нумерации обычно означают удалённые посты или служебные сообщения, и по ним видно, что канал чистил ленту.
Отдельным листом могу сделать карточку канала: название, описание, ссылка, число подписчиков из открытой шапки и дату первого найденного поста.
- полный архив канала или срез за выбранные даты
- текст поста с сохранением ссылок и разметки
- просмотры, реакции по видам, пересылки
- фильтр по ключевым словам и хэштегам
- рейтинг постов по охвату внутри канала
Как найти каналы по теме
Если списка каналов нет, я могу подобрать его: найти публичные каналы по ключевым словам, собрать описания и открытые показатели, отсеять пустые и заброшенные. Это удобно, когда нужно составить медиаплан или сравнить нишу.
Критерий отбора вы задаёте сами: минимальная частота публикаций, язык, свежесть последнего поста. Я отмечаю, где данные неполные, чтобы вы не принимали решение по случайной цифре.
Подводные камни
Просмотры у поста растут первые сутки, а потом почти замирают. Если сравнить пост часовой давности с недельным, вывод будет неверным. Поэтому в аналитике лучше брать посты старше суток или фиксировать значение по таймеру.
Накрученные просмотры тоже встречаются. Парсер их не отличит, но по таблице хорошо видно аномалии: соотношение просмотров к реакциям и пересылкам у такого канала выглядит иначе, чем у живого.
Перед работой я проверяю, какие данные доступны для вашего списка каналов, и выбираю официальный путь доступа. Закрытые каналы и каналы с ограничением по возрасту могут быть недоступны без авторизации, их не трогаю.
Что получится в итоге
Типичный результат для анализа конкурентов: лист с постами, лист со сводкой по каналу (посты в неделю, средний охват, доля постов с вложениями) и лист с топом публикаций. По такой таблице видно, какие форматы работают в нише, а какие проходят незамеченными.
Для рекламных размещений добавляю отношение охвата к числу подписчиков в шапке. Канал с большой аудиторией и малым охватом свежих постов обычно хуже, чем скромный, но живой.
Если в ленте много репостов, можно отделить собственные посты от пересланных, иначе статистика оценивает чужой контент как авторский.
Разовая выгрузка или регулярный сбор
Разовый парсинг подходит для исследования: получили файл, посмотрели, сделали выводы. Автоматический парсер нужен, когда следите за конкурентами постоянно: он по расписанию добавляет новые посты и обновляет счётчики в таблице или базе.
Формат отдаю тот, что удобен вам: xlsx, csv, json или загрузка в SQL. Напишите в чат своими словами задачу, в режиме диалога обсудим и определим стоимость.