Можно ли парсить YouTube
Вопрос законный, и ответ зависит от цели. Публичные сведения о видео и каналах (название, дата, просмотры) доступны любому зрителю, и анализировать их можно. Для массовой выгрузки у платформы есть официальный интерфейс с собственными правилами и квотами, и я стараюсь опираться на него. Скачивание чужих видео, которое часто называют граббером, обход ограничений платформы и сбор данных о зрителях в работу не входят.
Перед началом проверяю, какие данные доступны для вашей задачи, и подбираю законный путь.
Что собираю
Основные варианты задач: список всех видео канала, результаты поиска по запросу, плейлист, видео по списку ссылок. Для каждого видео фиксирую название, описание, теги, дату, длительность и публичные счётчики.
- каталог видео канала или плейлиста
- выдача по поисковому запросу
- просмотры, лайки, число комментариев
- описание, теги, главы
- сводка по каналу: число видео, частота выхода
Комментарии и подводные камни
Тексты комментариев могут быть нужны для анализа реакции: какие вопросы задают зрители, что хвалят и ругают. В таблицу беру сам текст, дату и число лайков, без имён и ссылок на профили. Это анализ темы, а не сбор данных людей.
Счётчики меняются со временем, поэтому в файле указываю дату среза. Число дизлайков YouTube с конца 2021 года публично не показывает, так что этой колонки в выгрузке нет. Скрытые лайки и закрытые комментарии остаются пустыми, я не заполняю их догадками.
Если нужны не только числа, а выводы, добавляю сводку по каналу: какие темы дают больше просмотров, на какой день недели приходятся успешные ролики и как длительность связана с реакцией зрителей.
Для регулярной аналитики настрою автоматический парсер, который по расписанию добавляет новые видео и обновляет счётчики. История покажет, какие ролики набирали просмотры в первые дни.
Для оценки пришлите ссылки на каналы, плейлисты или поисковые фразы, период и нужные поля.