GitHub 热门项目：google-news-scraper

GitHub 项目：google-news-scraper 仓库地址：https://github.com/oxylabs/google-news-scraper 星级：3381 | 作者：oxylabs 项目描述：使用 Google News Scraper API 为您的项目获取最新的全球新闻，包括来自 Google 新闻平台的各种来源、标题、URL 和发布日期。 =================================================== 自述文件内容： # 抓取 Google 新闻 [](https://oxylabs.io/pr产品/scraper-api/serp/google?utm_source=877&utm_medium=affiliate&groupid=877&utm_content=google-news-scraper-github&transaction_id=102c8d36f7f0d0e5797b8f26152160) [](https://discord.gg/Pds3gBmKMH) [](https://www.youtube.com/@oxylabs) - [免费 Google 新闻抓取工具](#free-google-news-scraper) + [先决条件](#先决条件) + [安装](#安装) + [获取要抓取的主题](#getting-the-topic-to-scrape) + [抓取](#scraping) + [注释](#notes) - [Oxylabs Google 新闻抓取 API](#oxylabs-google-news-api) + [请求样品](#request-sample) ## 免费的 Google 新闻抓取工具 ### 先决条件 要运行此工具，您需要在系统中安装 Python 3.11。 ### 安装 打开终端窗口，导航到此存储库并运行以下命令： `进行安装` ### 获取主题 该工具用于根据所列主题来抓取 Google 新闻文章。 首先，打开Google新闻，浏览网页顶部标题中列出的主题。 单击您要抓取的主题。 在此示例中，我们将使用“业务”主题。 接下来，在浏览器中查看 URL 并复制“/topics/”后面的字符串，这就是您的主题 ID。 在屏幕截图中显示的 URL 中，主题 ID 为“CAAqJggKIiBDQkFTRWdvSUwyMHZNRGx6TVdZU0FtVnVHZ0pWVXlnQVAB”。 保存此值，您将需要它来抓取文章。 ### 刮擦 要从所选主题中抓取文章，请在终端中运行以下命令： `制作抓取 TOPIC_ID=` 之前选择了“Business”主题 ID，命令应如下所示： `制作抓取 TOPIC_ID=CAAqJggKIiBDQkFTRWdvSUwyMHZNRGx6TVdZU0FtVnVHZ0pWVXlnQVAB` 运行命令后，您应该在终端中看到以下内容： 该工具完成运行后，您应该在运行该工具的目录中看到一个名为“articles.csv”的文件。 如果打开生成的 CSV 文件，数据应如下所示： ### 注释 万一鳕鱼