零基础上手:Cursor + MCP 爬取 YouTube 视频数据

发布于:2025-08-30 ⋅ 阅读:(18) ⋅ 点赞:(0)

前言

大模型与 AI 应用越来越普及的今天,实时、稳定地获取网络数据变得尤为重要。无论是做内容分析、趋势研究还是自动化任务,爬取和处理数据始终是绕不开的一环。
传统爬虫往往面临封禁、验证码、动态渲染等难题,而 Bright Data MCP(Model Context Protocol)为我们提供了一种更高效、更稳定的解决方案。本文将带你从零开始,结合 Cursor + MCP,快速实现对 YouTube 视频数据的爬取。

免费体验地址:Bright Data MCP
(除了免费的MCP以外,此链接注册送25刀,适用所有产品)

准备工作

在使用 MCP 之前,需要做一些准备:

  • 安装 Node.js:确保本地环境具备运行 MCP 的条件。

  • 选择运行模式:Bright Data MCP 提供 自我托管 和 托管 两种模式,可根据需求选择。

  • API 模型:

    • 快速版(Fast API):每月 5000 个免费额度,支持解锁器、SERP。

    • PRO 版(Pro API):功能更强大,支持浏览器 API、抓取器等高级功能。

  • 高级设置:可在 Bright Data 控制台配置 Zone,包括 Web Unlocker Zone 和 Scraping Browser Zone。

Bright Data MCP

在爬取过程中使用 Bright Data MCP,它能帮我们解决爬虫里很多常见的难题:

  • 搜索:可以直接从主流搜索引擎抓取实时结果,还能按地区定向搜索。

  • 爬取:支持整站爬取,并且输出的数据对大模型非常友好。

  • 访问:能自动绕过地理限制、验证码,还能渲染动态页面。

  • 导航:甚至可以模拟真实用户的操作,像点按钮、翻页这些交互都能自动完成。

有了这些功能,爬取 YouTube 视频数据就不再是难事。

爬取结果

最终爬取结果如下:

[
  {
    "title": "AI Agents, Clearly Explained",
    "url": "https://www.youtube.com/watch?v=FwOTs4UxQS4",
    "channel": "Jeff Su"
  },
  {
    "title": "Zero To Your First AI Agent In 26 Minutes (no code)",
    "url": "https://www.youtube.com/watch?v=DV0Ln7HRyJQ",
    "channel": "Tina Huang"
  },
  {
    "title": "AI Agents Fundamentals In 21 Minutes",
    "url": "https://www.youtube.com/watch?v=qU3fmidNbJE",
    "channel": "Tina Huang"
  },
  {
    "title": "How to Build & Sell AI Agents: Ultimate Beginner's Guide",
    "url": "https://www.youtube.com/watch?v=w0H1-b044KY",
    "channel": "Liam Ottley"
  },
  {
    "title": "How to Build an Advanced AI Agent with Search (LangGraph Tutorial)",
    "url": "https://www.youtube.com/watch?v=cUC-hyjpNxk",
    "channel": "Tech With Tim"
  },
  {
    "title": "From Zero to Your First AI Agent in 25 Minutes (No Coding)",
    "url": "https://www.youtube.com/watch?v=EH5jx5qPabU",
    "channel": "Futurepedia"
  },
  {
    "title": "5 Types of AI Agents: Autonomous Functions & Real-World Examples",
    "url": "https://www.youtube.com/watch?v=fXizBc03D7E",
    "channel": "IBM Technology"
  },
  {
    "title": "The AI Agent Tutorial That Should've Been Your First (no code)",
    "url": "https://www.youtube.com/watch?v=GchXMRwuWxE",
    "channel": "Jeff Su"
  },
  {
    "title": "Introduction to ChatGPT agent",
    "url": "https://www.youtube.com/watch?v=1jn_RpbPbEc",
    "channel": "OpenAI"
  },
  {
    "title": "The Agent Factory - Episode 1: Agents, their frameworks and more",
    "url": "https://www.youtube.com/watch?v=aLYrV61rJG4",
    "channel": "Google Cloud Tech"
  },
  {
    "title": "Introducing Manus: The General AI Agent",
    "url": "https://www.youtube.com/watch?v=K27diMbCsuw",
    "channel": "Manus AI"
  },
  {
    "title": "【生成式AI時代下的機器學習(2025)】第二講:一堂課搞懂AI Agent 的原理",
    "url": "https://www.youtube.com/watch?v=M2Yg1kwPpts",
    "channel": "Hung-yi Lee"
  }
]