进入8月就是做猿人学整整6年了,2019-2025,从最开始想每月多挣5000补贴家用,没想到一做就是6年。6年时间,猿人学在中国的爬虫圈子也算小有名气,中国1000多家大大小小的公司都有猿人学的学员和朋友在。

从上一段7年的创业,2012-2019,加一起创业也13年了。那一段比较失败的7年给我的感受是,做一个公司或一个业务不需要人多(虽然我们最多时有50人),宁缺毋滥,人真的很重要,招人要谨慎。
后面做猿人学就想怎么能做一个人少,事少,还能挣钱的活儿。
一人公司
从做猿人学一开始,我就不想把规模做很大,因为那需要更多的人,承担更大的责任,那样很累。我喜欢被动收入,睡后收入,天天玩都能挣钱这种。要做到这个要么有被动的流量形态(不怎么维护),要么已经形成品牌效应。
可能大家不知道,猿人学6年了,有4年时间,都只有2个人运营,有两年时间,我基本每天工作2小时,每天卖完课就休息。甚至每年组织各个城市上百人的猿人学线下聚会都是2个人完成的。
如果没有家庭,那就是妥妥的数字游民,只要有一台手机就可以搞定。
上学的时候,我的QQ签名是天道酬勤,我相信要努力要勤奋。但是得加上在方向正确的情况下。这两年人懒成这样,却比上一个7年容易多了,那7年时间我有6年都是单休,苦得不得了。
把事情想通
把事情想通想明白,我喜欢谋定而后动(这有坏处,可能错过某个突然爆发的快钱机会)。20年的时候,我详细思考了我卖爬虫课,需要做哪些事情。那时想清楚了二件事情。
第一个事爬虫是一个较小的圈子,跟前后端开发测试这些不一样,因为圈子小,六度关系就更近,所以关系和口碑就更容易形成,这个认识让我20年就开始把猿人学作为一个社群运营,而不是培训机构。所以在20年咱们就是开始了做猿人学的线下聚会,线下城市聚会这一做就是5年。
第二个事是逆向技术的对抗变化快,每半年多可能攻守技术都有新的变化,所以课程内容失效比较快。有可能买到课,还没看完,就失效了。所以我决定课程要一直更新(只要我还在从事爬虫这一行),并且更新的内容,老学员可以免费看。
这两个是支撑猿人学走到第6年的关键。并且跟培训机构有明显的受众差异,培训机构以小白,大学生为主。猿人学买课的用户有70%是已经在爬虫岗位上工作的人。
爬虫未来
有人说,大模型的发展,程序员要失业咋的,爬虫也快了什么的。如果你本来是做增删改查,写sql语句啥的,那本来都是要被替代的。
大家可以想一想 ChatGPT 出来以后,爬虫的需求是增加了还是减少了,GitHub上的爬虫工具是不是更多了?AI 智能体的出现,对爬虫的需求怎么样? FireCrawl apiFy 之前的 Manus 最近很火的 Open Lovable ,基础上是不是都要依赖爬虫工具?
岗位数量可能会减少,这是所有行业的趋势,如果把眼光放到全球,对逆向的需求,对爬虫工具,自动化工具的需求,爬虫在大模型出来后,有了更多可能。
OpenAI 定义的 AI 发展,现在发展到第三个阶段智能体 Agent, 这个阶段是AI要作为人类助手,协助人类做现实世界的事情。之前以为这个阶段AI自己能生成工具,现在是 Agent 要借助现有工具,通过 MCP 协议去控制工具,不然没法做事情。
如果把视野放到 GitHub 上,Discords的一些爬虫群组里,会感到有希望。
爬虫挣钱
说实话,爬虫在注意安全的情况下,很适合做一人公司。这个感受从我10多年前到现在一直没变过。我们搞爬虫的,第二收入大多数以接单为主,爬虫单子在水面下确实庞大。现在还能接单获得非常高收入的,基本是18-22这几年很早期做淘宝或在爬虫群很活跃等,积累,过滤,沉淀了一批老客户在私域。
我这两年看到的有的转移到海外客户,他们的的数据需求也很旺盛,英语时差不行的话,可以关注东南亚客户。另外远程Web3和兼职海外AI爬虫公司越来越多。
另外一个就是我很喜欢的聚合数据做产品,或提供爬虫工具等,面向海外,对爬虫更包容,市场也更广,挣得也更多。一个FireCrawl 可以融资上千万美金;apiFy直接提供各种电商社媒数据采集接口,24年营收一千多万美金;还看见海外有直接采集Linkedin邮箱的类似一人公司,一年多营收60多万美金。这些事在国内是不可想象的。
关于竞争
一直有小伙伴给我说,你看谁谁哪家培训机构怎么的,你也要天天抖音B站直播,不然买课的用户都被抢了。
这个问题我还真认真思考过。
是要关注竞争,要了解动态,不能闭门造车,又不能过于关注竞争,因为会让人焦虑;跟随竞争做相同的事,可能失去“初心”,失去现有用户的支持。
培训机构是有一套完整的团队,销售,运营,投留,技术,内容等几十号人。他的打法需要快,快转化,因为这么多人每月的开支很大,KPI压力大。营销就会激进,培训卖课这方面容易陷入欺诈式营销。
然后他的主要用户是大学生、急于转行的,在不怎么了解爬虫的情况下,会被高频的直播话术,短视频,用流量漏斗筛出来。
其次是技术实力上,跟我们有差距,他们是职业讲师,脱离一线,我们是一直在一线干逆向,逆向的技术变化快,半年多时间不在一线都会开始脱节。
前两年有一阵我还是有点焦虑,因为抖音B站总是推送这些,总看见。后面综合分析了,首先我不可能每晚也坐在电脑面前直播,而且每晚说着同样的夸张的营销话术,这不是我想要的生活。但是取长补短,做一些有意义的正本清源的长视频我觉得还是有必要。
然后我服务的用户大部分是做爬虫工作的,能分辨课程的好坏,跟他们的群体不一样。我如果再去那样直播,会被大家当做笑料,伤害到猿人学的口碑。
最后我只有两个人呢,把猿人学做到现在规模,我们其实挺强大的,没必要去过分关注竞争。要继续服务好我们的用户,做口碑,慢慢渗透,慢慢影响大学生群体。
猿人学的未来
“汇聚中国的爬虫er”,这是我想做的尝试,把中国的爬虫er汇聚起来,做成一个社群,一个爬虫圈子。6年时间没想到把猿人学做到现在这个样子,咱们在国内1000多家公司都有小伙伴在。
希望能做成一个资源汇聚,解决大家跳槽,信息&资源交换,合作之地。
然后是也在探索一些海外业务。原因我在上面也解释了。
今年在做海外代理IP 和 一些海外工具的开发。这几年面临着不少诱惑和选择,沿着爬虫需要的链路:工具,数据,代理IP,资源撮合,最后权衡选择了海外代理IP和海外工具开发这两个。有个小憧憬,也许我们会成为一个立足中国西南,面向海外的小而美的公司。
有人说猿人学爬虫课做不下去了,就开始卖海外代理了,实际今年咱们课程比去年和前年都卖的好呢。以前躺平,今年想 think bigger 。

我的公众号:猿人学 Python 上会分享更多心得体会,敬请关注。
***版权申明:若没有特殊说明,文章皆是猿人学 yuanrenxue.con 原创,没有猿人学授权,请勿以任何形式转载。***

说点什么吧...