如果做自媒体,尤其是公众号自媒体的圈友,对微信公众号的内容爬取是刚需之一,很多好的二创都需要获取对标的内容进行二创的额,如何免费的,稳定的爬取微信公众号的文章其实是一个非常麻烦的事情!
如果借助第三方的工具和平台(比如闲鱼)是专门做这个生意的,是需要给钱的,今天我给大家介绍通过workbuddy来免费的爬取微信公众号,介绍2中方法,一起来看一下!
强调一下:用 Workbuddy 模型最好用deepseek 或者k3 ,或者glm 这样的强一些大模型(默认的auto我只是给大家演示的,实战的时候我建议全部换成deekseep v4-Flash 或者pro)
一.第一种方法
01.创建Workbuddy的项目
所谓的技能其实就是一个skill ,就是别人已经写好的微信公众号文章爬取工作流,你直接就可以了!非常适合小白或者完全不懂的新人,开箱即用!
打开workbuddy ,我们新建一个工作空间,然后权限可以

然后把权限可以完全打开

然后点这个+号去选择技能,然后点击管理技能

02.安装微信公众号技能
然后点技能这个按钮,就会出现很多很多的别人已经写好的skill (你可以认为这个就是腾讯的skill应用市场),然后搜索微信公众号,就会出现很多微信公众号相关的skill

里面有很多关于微信公众号的技能,大部分都是差不多的,后面我们会讲一键排版发布,现在主要讲微信公众号采集,我选了上面的我用红色框选的一个微信公众号技能:

点击安装即可
安装好了之后,我们回到刚才的我们创建的项目里面,输入/ 就会现在当前已经安装好了的技能

03.采集文章
点一下这个技能,我们随便找一篇给公众号的文章的链接,比如新智元的的文章:

把这个文章的链接copy下来,用这个技能采集一下:

很快就采集到了这个文章:

右边就是它的内容,采集成了word格式的文件(但是这个有一个问题,就是它这个图片有的没显示出来,不是很方便,而且这个消耗的积分也比较多差不多40个积分),下面我们来讲第二种。
二.第二种方案
第二种方案其实就是安装一个开源的专业的插件工具,这个工具还是很有名气的额,而且每个月有1000次的免费爬取的额度,关键是效果也不错的!
01.安装一个开源的工具Fireclawl
下面我们需要安装一下这个开源的爬取工具fireclawl
https://www.firecrawl.dev/playground?endpoint=scrape

然后需要注册一下,点击右上角的sign up

如果你有谷歌账户的话,直接用谷歌的或者github账户登入即可。

里面有一个api key 记得保存下来
02.让Workbuddy 配置一下Firecrawl的密钥
下面我们需要安装一个开源的免费的爬虫工具来解决这个问题,输入下面这段话:
我想做一个最小可用版本的文章抓取工具,项目名叫 article_firecrawl_mvp。 目标: 使用 Firecrawl 抓取 urls.txt 里的公开文章链接,并把每篇文章保存成 Markdown 文件。
这个skill的安装详细看这个文档:https://docs.firecrawl.dev/sdks/cli
其实原理的话就是:让Workbuddy安装firecrawl mcp 接口,利用这个开源工具的接口来爬取内容。因为firecrawl 是提供了这个skill 的!

大概4分钟左右就安装好了,然后没有配置api key ,我们接着输入一个提示词,把前面我们拿到的apikey 配置一下

很快就配置好了

03.开始采集文章
然后我们让workbuddy把这个工具变成一个skill ,这样就可以直接使用了。

也就是说我们只要说一句:“用 firecrawl 采这些 URL”就可以了。我们试一下(我这里切换了大模型了, auto很差,建议用deepseek)

可以很明显的看到这个文章成功采集,而且图片也显示出来了!
网站会员联系我加入微信社群,站长每晚稳定分享,点击查看介绍



请登录后查看回复内容