寻一位高级网络爬虫与反反爬虫技术工程师 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
/go/outsourcing 节点。
不要把相同的信息发到不同的节点
panda777
V2EX    酷工作

寻一位高级网络爬虫与反反爬虫技术工程师

  •  
  •   panda777 263 天前 2326 次点击
    这是一个创建于 263 天前的主题,其中的信息可能已经有所发展或是发生改变。
    高级网络爬虫与反反爬虫技术工程师
    ( Senior Web Scraping & Anti-Bot Engineer )

    工作模式:100% 远程办公 工作地点: 全球范围内均可申请 薪资范围: 每月 $3,200 至 $4,500 美元 (表现卓越的候选人可调整上线)

    ♂ 职位描述
    我们正在寻找一名经验丰富的高级网络爬虫与反爬虫工程师,擅长基于 Python 的网络爬取、反爬虫技术和数据整合。在此岗位上,您将负责开发和维护高性能、可扩展的爬虫系统,从航空公司和酒店网站获取重要的定价与会员数据。这些网站均受到高级反爬虫技术保护(例如 Akamai 、Kasada 、Cloudflare 、DataDome 、PerimeterX 等)。主要技术栈为 Python ,优先使用 AWS 云基础设施。

    必备要求
    熟练掌握高级 Python 网络爬虫工具和框架(如 Playwright 、Puppeteer 、Selenium 、Scrapy 等)。
    有成功绕过复杂反爬虫系统的经验(包括 Akamai 、Kasada 、Cloudflare 、DataDome 、PerimeterX 等)。
    精通代理技术、IP 轮换、浏览器指纹技术和 TLS 指纹技术等反屏蔽策略。
    能够设计并实现分布式、高性能的网络爬虫系统,以便并发地从多个来源获取数据。
    出色的英语沟通能力,能够顺利融入国际远程团队。
    具备从用户认证网站提取数据的实际经验,能够处理复杂的认证流程,包括 MFA/2FA 。

    优先考虑
    拥有 API 逆向工程( reverse-engineering ,如 GraphQL 、JSON API 等)的相关经验。
    熟悉网络流量捕获与分析工具(如 mitmproxy 、Burp Suite 等)。
    了解事件驱动架构和消息系统(如 Kafka 、RabbitMQ )。
    熟悉 AWS 云服务和基础设施。

    加入我们的国际团队,一起重新定义旅游和会员领域的数据聚合方式

    有意者请直接发送简历(英文版更加)至下方地址:
    ZGFuaWVsQG5pdXJvLmlv
    3 条回复    2025-09-29 00:45:59 +08:00
    wmm1996528
        1
    wmm1996528  
       263 天前
    我就是做航司的 但是英语不好
    Akamai 、Kasada 、Cloudflare 这三个都做过
    panda777
        2
    panda777  
    OP
       258 天前 via iPhone
    没有合适的小伙伴吗
    fortest11
        3
    fortest11  
       51 天前
    @wmm1996528 有做过 px3 吗?怎么联系
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3550 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 32ms UTC 04:40 PVG 12:40 LAX 20:40 JFK 23:40
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86