Alpha Pulse New

AI 产品

开发者调整微信公众号搜索工具以应对搜狗格式变更

首次出现 8月15日 18:31·最近更新 8月15日 18:31

在进行公司新闻报道查询和归档的自动化任务时,发现此前使用的微信公众号内容搜索工具因搜狗搜索格式变更而漏抓数据。基于用户@tjx666的工具调整细节,开发了一个新的命令行界面(CLI)工具。数据源仍为搜狗搜索,核心目标是获取稳定的URL和文章正文,CLI形式便于整合到技能中。为应对反爬虫问题,设置了较长的抓取间隔,适用于关键词较少的轻量级需求,但不适合大批量抓取。此描述基于个人分享,区分事实(工具问题、解决方案)与讨论(个人对适用性的观点)。

多来源证据

事件时间线

  1. 8月15日 17:32
    Twitter/X AI List
    今天在做公司新闻报道查询和归档的自动化任务,发现此前用的微信公众号内容搜索的工具,因为搜狗的格式变更漏抓了不少的数据,干脆在 @tjx666 的基础上调整细节新撸了一个。 数据源还是来自搜狗搜索,核心诉求是拿到稳定的 Url 以及可以爬到文章的正文,形式上使用了 CLI,更方便整合到 Skill 当中去。 然后为了
返回新闻流