领英宣布退出中国一周年，我那个用 Selenium 爬了五年的自动化脚本彻底成了废铁。去年这时候，我还在跟团队里的小孩吹牛，说这套脚本是我们“数据中台”的基石，结果一夜之间，基石就沉到太平洋底了。这不是第一次，也不会是最后一次，但这次不一样，它带走了我最后一点关于“稳定流量源”的幻想。
去年七月消息刚出那会儿，我第一反应不是伤感，是恐慌。手头三个客户的竞品分析报告还指着领英的数据源续命，合同签了，预付款收了，脚本一停，我拿头去交付？团队里两个刚招的运营小孩眼巴巴看着我，那眼神我现在都记得，写满了“老板，怎么办”。我能怎么办？那两个月我像个救火队长，白天安抚客户说我们在找替代方案，晚上自己钻回电脑前，重新打开尘封的 PyCharm。什么管理，什么团队协作，在断粮的风险面前都是狗屁。我让那两个小孩去研究脉脉和 Boss 直聘的公开接口，自己则一头扎回老本行：搞基础设施。团队？那会儿我才明白，当危机真来的时候，能依赖的只有自己手指敲出来的代码。所谓的“管理红利”，在平台规则的铁拳下，薄得像张纸。
替代方案没那么好找。脉脉的反爬升级到了变态级别，一个账号稍微频繁点，直接设备指纹封禁，连带手机号一起报废。Boss 直聘的接口返回数据全是前端渲染，得用 Puppeteer 模拟真人滑动，效率低得令人发指。那段时间我抽烟抽得特别凶，凌晨三点不是矫情，是真的睡不着，脑子里全是怎么绕过那个该死的 Cloudflare 验证码。最后逼出来的方案，是用 Docker 容器化每一个采集节点。每个容器里跑一个独立的浏览器实例，配一套完整的虚拟环境（时区、语言、User-Agent、Canvas指纹混淆），再用 Redis 做任务队列和 IP 池的健康状态缓存。关键不是容器化本身，而是我给每个容器写了一套逻辑反馈机制：脚本不再是无脑循环，它会自己记录每次请求的响应时间、状态码、是否触发验证，然后根据这些数据动态调整请求频率，甚至自动切换备用IP。哪个节点连续报错三次，就自动销毁容器，从镜像仓库拉一个新的起来。我要的就是这种“死了自己埋，活了继续干”的丝滑。
这个过程让我找回了2016年那种独狼黑客的快感。没有会议，没有扯皮，没有谁跟你讨论“这个需求合不合理”。问题就在那儿，代码就在眼前，你唯一要对话的就是终端里滚动的日志。优化Dockerfile，把基础镜像从Ubuntu换成Alpine，体积从1.2G压到180M，启动时间从8秒缩短到2秒。调整Puppeteer的启动参数，禁用GPU、启用无头模式、设置合理的视窗大小以避免被检测为Headless。看着监控面板上几十个绿色的小点平稳运行，吞吐量曲线平滑上升，那种满足感，比开十个管理例会都实在。身体是累，但心不慌。我知道这套系统每一个螺丝钉在哪，它出问题我能五分钟内定位到是Redis连接池满了还是某个代理IP供应商的API挂了。这种掌控感，是带团队那两年里，我几乎忘掉的东西。
领英这座岛沉了，逼着我从“船长”的角色，又变回了那个自己造船、自己掌舵的水手。团队后来还是收缩了，只留了一个能写点脚本的技术，其他都转成了项目制合作。我重新开始健身，逼自己吃低卡餐，因为我知道，接下来这种高压、高密度的个人技术攻坚会是常态。流量孤岛会一个个消失，但只要你造的那艘船足够快、足够智能，总能发现下一片浮冰。只是下次，我不会再把船钥匙轻易交给别人了。
