如题, 感觉爬虫知识很凌乱, 有什么系统的技能树借鉴一下吗 顺便, 如果想转产品经理的话, 困难吗
![]() | 1 scukmh 2020-04-08 13:53:02 +08:00 ![]() 三年爬虫经验: 1. 熟练使用 python 编写爬虫两年 2. 坐牢一年 |
![]() | 2 zhanglp888 2020-04-08 13:56:29 +08:00 @scukmh 哈!感受了 |
3 renmu123 2020-04-08 14:03:10 +08:00 随便列举一点(我也不是干爬虫的): 1. 集群下载 2. app 逆向 3. js 逆向 4. js 解密 5. 不同验证码的破解方法 6. 各种反反爬的知识 |
![]() | 4 lhx2008 2020-04-08 14:03:49 +08:00 via Android 爬虫好像要知道的东西不多,比较难的可能是调度架构,JS 分析,验证码识别,数据清洗之类的吧 |
![]() | 5 wolfan 2020-04-08 14:04:52 +08:00 via Android 职业律师资格证书 |
![]() | 6 zcfnc 2020-04-08 14:05:00 +08:00 不吃三年劳饭的程序员 不是一个好的爬虫产品经理 |
![]() | 10 yinjy 2020-04-08 15:16:23 +08:00 看成三年爬树了 |
11 forgottencoast 2020-04-08 15:25:28 +08:00 吓的瑟瑟发抖。 幸好我写爬虫的时候还不流行坐牢。 |
![]() | 12 hugedata 2020-04-08 16:15:56 +08:00 楼上说的职业律师资格证书和坐牢一年这些是备选,主要还是自己要多学习一些法律知识,打铁还需自身硬。一定要知法、懂法、守法。 |
![]() | 13 murmur 2020-04-08 16:21:30 +08:00 现在的爬虫跟爬虫本身已经没多大关联了,首先你得有资源,包括机器和 IP,然后你要能逆向,各种与反扒对抗,最后你要有法律知识,不要越界被制裁 |
![]() | 14 labulaka521 2020-04-08 16:23:34 +08:00 via Android @renmu123 再加一条熟悉法律知识 |
15 masker0817 2020-04-08 16:25:09 +08:00 via Android 会用脚捡肥皂? |
![]() | 16 wangyzj 2020-04-08 16:34:05 +08:00 高级一点逆向工程是必须的 |
![]() | 17 yprisoner 2020-04-08 16:38:38 +08:00 一楼笑死哈 |
![]() | 21 kasper4649 2020-04-09 16:48:32 +08:00 JS 逆向挺烦的,我还是太菜,打断点找半天。 |
![]() | 22 lasuar 2020-04-09 17:19:31 +08:00 转的话后端比较方便吧; 说一些重要的技能点:懂 js 逆向,app 逆向,验证码破解(这个不强求,简单的尽量打码平台),分布式爬虫部署,四选三,逐一而精就够了。 |
23 Cmdhelp 2020-04-10 18:40:14 +08:00 毕业小白,js 调试得会,html 解析得会,分布式得会,docker 得会,ios 逆向找加密~~~,泪奔 |