Kumar & Solo
@solokumi
Как парсить (собирать внешние данные) откуда угодно через Cursor + Claude Code
Спойлер: самое сложное в этом процессе — это установить Cursor и Claude Code, а об этом мы уже подробные посты писали, вот тут и вот тут
Что можно (и нужно) парсить:
1) Креативы конкурентов из рекламных библиотек
Подключаем парсер к открытым библиотекам рекламы: Meta Ad Library, Google Ads Transparency Center, TikTok Creative Center, LinkedIn Ad Library, Twitter/X Ads Transparency Center, VK Реклама
Claude Code может подключить парсинг через MCP Apify (это платформа с готовыми скриптами для парсинга чего угодно)
Можно делать парсинг и через прямой API библиотек, но Apify — это способ "из коробки", нужные данные вы получите в нужном виде и меньше будет проблем с доработкой скрипта.
На выходе вы получите таблицу с датой: ID рекламного размещения, датой старта открута, превью баннера, текст креатива. Дальше считаете количество дней открута (для анализа нужно то, что откручивается дольше всего)
Следующая задача состоит в том, чтобы распознать, что находится на баннере и разбить все на параметры (вот такие)
У Яндекса открытой библиотеки нет, но можно парсить выдачу по запросам, об этом чуть ниже.
2) Поисковая реклама и позиции в поиске
Собираем список ключевых слов, по которым хотите отслеживать позиции и рекламу конкурентов
Делаете запрос к Claude Code, например:
"У меня есть список из 30 ключевых слов. Мне нужна выдача Яндекса по ним — собери данные через Apify в виде таблицы CSV"
Claude Code запустит парсер и вернёт таблицу с данными: запрос, тип выдачи (Реклама / Органика), позиция в поиске, заголовок, описание, URL, домен.
3) LinkedIn-контакты
Всё так же через знакомый нам MCP Apify или специальный тул для семантического поиска Exa.ai (вот их гитхаб) можно собрать базу потенциальных клиентов или партнёров: имена, должности, компании, ссылки на профили. Например, всех маркетинг-директоров из fintech-компаний в Москве или всех CEO стартапов в определённой нише.
Это также супер полезно для HR (можно идти и хантить к вам этих ребяток )
На выходе получаем таблицу с датой: имя, должность, компания, локация, ссылка на профиль LinkedIn, описание из профиля (если доступно)
4) Через Exa.ai можно также делать краулинг сайтов = вытащить весь контент с конкретной страницы. Можно мониторить все изменения и обновления у конкурентов, в том числе цены, описания, товары и тд
Есть еще MCP Firecrawl, это полноценный краулер сайтов (Exa всё-таки больше заточен под поиск), он может обходить защиту от ботов, пейволлы и авторизацию и парсить контент всего сайта целиком, даже сложного.
5) Телеграм каналы
Можно настроить ежедневный дайджест — например, в 10 утра падает сводка: о чем писали в выбранных каналах за вчера, какие темы, какие посты набрали больше реакций.
Создаёте отдельный аккаунт Telegram на новую симку (чтобы не рисковать основным), авторизуетесь вот тут, создаёте приложение и копируете API ID и API Hash. Даете Claude Code эти данные — и он настроит интеграцию с аккаунтом. Чтобы получать сводку по каналам в личку, нужно создать бота через BotFather, скопировать токен и попросить Claude настроить бота с нужным скриптом.
Через MCP Telegram кстати можно настроить себе полноценную операционную систему для личной эффективности, которая автоматизирует вам практически всю жизнь и работу.
Подключаете к Claude Code свой Telegram, календарь, почту и одной командой получаете:
— План действий на основе лучших мировых практик по вашим созвонам
— Оставшиеся задачи
— Контекст для будущих встреч
— Непрочитанные в Telegram с приоритезацией и заранее приготовленные ответы на них (которые еще и отправить можно автоматически)
3-го февраля на живом эфире в формате скриншера покажем, как это работает и как развернуть эту систему у себя и сделать это безопасно! Регайтесь по ссылке, ребзя!
Спойлер: самое сложное в этом процессе — это установить Cursor и Claude Code, а об этом мы уже подробные посты писали, вот тут и вот тут
Что можно (и нужно) парсить:
1) Креативы конкурентов из рекламных библиотек
Подключаем парсер к открытым библиотекам рекламы: Meta Ad Library, Google Ads Transparency Center, TikTok Creative Center, LinkedIn Ad Library, Twitter/X Ads Transparency Center, VK Реклама
Claude Code может подключить парсинг через MCP Apify (это платформа с готовыми скриптами для парсинга чего угодно)
Можно делать парсинг и через прямой API библиотек, но Apify — это способ "из коробки", нужные данные вы получите в нужном виде и меньше будет проблем с доработкой скрипта.
На выходе вы получите таблицу с датой: ID рекламного размещения, датой старта открута, превью баннера, текст креатива. Дальше считаете количество дней открута (для анализа нужно то, что откручивается дольше всего)
Следующая задача состоит в том, чтобы распознать, что находится на баннере и разбить все на параметры (вот такие)
У Яндекса открытой библиотеки нет, но можно парсить выдачу по запросам, об этом чуть ниже.
2) Поисковая реклама и позиции в поиске
Собираем список ключевых слов, по которым хотите отслеживать позиции и рекламу конкурентов
Делаете запрос к Claude Code, например:
"У меня есть список из 30 ключевых слов. Мне нужна выдача Яндекса по ним — собери данные через Apify в виде таблицы CSV"
Claude Code запустит парсер и вернёт таблицу с данными: запрос, тип выдачи (Реклама / Органика), позиция в поиске, заголовок, описание, URL, домен.
3) LinkedIn-контакты
Всё так же через знакомый нам MCP Apify или специальный тул для семантического поиска Exa.ai (вот их гитхаб) можно собрать базу потенциальных клиентов или партнёров: имена, должности, компании, ссылки на профили. Например, всех маркетинг-директоров из fintech-компаний в Москве или всех CEO стартапов в определённой нише.
Это также супер полезно для HR (можно идти и хантить к вам этих ребяток )
На выходе получаем таблицу с датой: имя, должность, компания, локация, ссылка на профиль LinkedIn, описание из профиля (если доступно)
4) Через Exa.ai можно также делать краулинг сайтов = вытащить весь контент с конкретной страницы. Можно мониторить все изменения и обновления у конкурентов, в том числе цены, описания, товары и тд
Есть еще MCP Firecrawl, это полноценный краулер сайтов (Exa всё-таки больше заточен под поиск), он может обходить защиту от ботов, пейволлы и авторизацию и парсить контент всего сайта целиком, даже сложного.
5) Телеграм каналы
Можно настроить ежедневный дайджест — например, в 10 утра падает сводка: о чем писали в выбранных каналах за вчера, какие темы, какие посты набрали больше реакций.
Создаёте отдельный аккаунт Telegram на новую симку (чтобы не рисковать основным), авторизуетесь вот тут, создаёте приложение и копируете API ID и API Hash. Даете Claude Code эти данные — и он настроит интеграцию с аккаунтом. Чтобы получать сводку по каналам в личку, нужно создать бота через BotFather, скопировать токен и попросить Claude настроить бота с нужным скриптом.
Через MCP Telegram кстати можно настроить себе полноценную операционную систему для личной эффективности, которая автоматизирует вам практически всю жизнь и работу.
Подключаете к Claude Code свой Telegram, календарь, почту и одной командой получаете:
— План действий на основе лучших мировых практик по вашим созвонам
— Оставшиеся задачи
— Контекст для будущих встреч
— Непрочитанные в Telegram с приоритезацией и заранее приготовленные ответы на них (которые еще и отправить можно автоматически)
3-го февраля на живом эфире в формате скриншера покажем, как это работает и как развернуть эту систему у себя и сделать это безопасно! Регайтесь по ссылке, ребзя!
🔥 58
❤ 48
❤🔥 24
👍 11
6
👏 5
👻 2
🦄 2
👾 2
14 835 16.4K
Обсуждение 14
Обсуждение не доступно в веб-версии. Чтобы написать комментарий, перейдите в приложение Telegram.
Обсудить в Telegram