新人写博客,前天刚把删除功能做出来,今天一看被 google 爬虫全删掉了 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Cabana
4.01D
V2EX    分享发现

新人写博客,前天刚把删除功能做出来,今天一看被 google 爬虫全删掉了

  Cabana 2017-01-22 15:08:41 +08:00 31867 次点击
这是一个创建于 3237 天前的主题,其中的信息可能已经有所发展或是发生改变。
还以为是谁发现我的地址了,恶作剧给删了呢,一看 nginx 日志才发现
![]( )
应为正在搭也没人知道,就暂时没有做登陆权限什么的,结果被 Google 坑了一把,还好大多都是测试数据只有几篇自己写的。
202 条回复    2017-09-14 10:29:35 +08:00
1  2  3  
wql
    1
wql  
   2017-01-22 15:11:10 +08:00 via Android
……作孽啊
easyzhao
    2
easyzhao  
   2017-01-22 15:12:34 +08:00
删除 你也用个 delete 或者 post 请求啊
droiz
    3
droiz  
   2017-01-22 15:14:04 +08:00
你这。。。有些厉害了。
mornlight
    4
mornlight  
   2017-01-22 15:15:39 +08:00
对不起,我笑了
haozibi
    5
haozibi  
   2017-01-22 15:16:10 +08:00 via Android
真是 6
Lonely
    6
Lonely  
   2017-01-22 15:16:45 +08:00 via iPhone
哈哈哈
wwsww
    7
wwsww  
   2017-01-22 15:17:08 +08:00   5
get 删除 => “被 google 坑了一把”
....
kn007
    8
kn007  
   2017-01-22 15:19:27 +08:00   2
。。。你这是自作孽啊。。。不判定来源,不判断权限,而且仅用 GET 方法就可以执行 delete 。厉害了。。。
Shura
    9
Shura  
   2017-01-22 15:19:28 +08:00 via Android
所以说鉴权很重要
kn007
    10
kn007  
   2017-01-22 15:19:53 +08:00   121
爬虫也是一脸懵逼,爬完后之前的 404 了。。。
R18
    11
R18  
   2017-01-22 15:20:27 +08:00
厉害了 鉴权都没有 那发文章是不是只要知道后台就行了
Troevil
    12
Troevil  
   2017-01-22 15:20:53 +08:00
笑~~
gotounix
    13
gotounix  
   2017-01-22 15:22:54 +08:00
太搞笑了,哈哈。
vilen1
    14
vilen1  
   2017-01-22 15:28:52 +08:00
火前留名
Ziya
    15
Ziya  
   2017-01-22 15:29:18 +08:00
笑出声了…
好久没见到这么「耿直」的删除功能了
1023400273
    16
1023400273  
   2017-01-22 15:29:40 +08:00   4
爬虫:我 TM 也是很无奈啊,刚刚还在怎么就 404 了
Geoion
    17
Geoion  
   2017-01-22 15:30:13 +08:00
噗,哈哈哈哈哈哈
yinxingren
    18
yinxingren  
   2017-01-22 15:30:48 +08:00
哈哈哈哈哈哈哈哈哈 笑出声来
leefly
    19
leefly  
   2017-01-22 15:31:43 +08:00
这个可以火一把
kchum
    20
kchum  
   2017-01-22 15:33:52 +08:00
我的心情顿时开朗起来。。闷了一天,心疼楼主一秒。
kafka0102
    21
kafka0102  
   2017-01-22 15:37:49 +08:00
楼主还觉得自己好无辜 哈哈
106npo
    22
106npo  
   2017-01-22 15:38:15 +08:00   7
这个想法很好啊,可以在内容被搜索引擎发现时自动删除.
ivmm
    23
ivmm  
   2017-01-22 15:40:10 +08:00
@kn007 莫名的笑了
think2011
    24
think2011  
   2017-01-22 15:40:39 +08:00
说不定让 google 的开发人员查了一整天的 BUG...
icodesign
    25
icodesign  
   2017-01-22 15:40:47 +08:00
这是一个自带笑声的主题
GOOD21
    26
GOOD21  
   201701-22 15:40:54 +08:00
啊哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈
cinhoo
    27
cinhoo  
   2017-01-22 15:42:04 +08:00 via iPhone
n6DD1A640
    28
n6DD1A640  
   2017-01-22 15:42:07 +08:00
哈哈哈哈哈。。。。
dong3580
    29
dong3580  
   2017-01-22 15:43:21 +08:00   1
这和联通修改密保邮件一个道理。

修改联通安全中心密码,用邮箱找回,然后这个链接只可以点击一次就会失效,然后每次 outlook 接收到,打开,尼玛打开链接提示你已经过期。

已经没救了,
Cabana
    30
Cabana  
OP
   2017-01-22 15:46:08 +08:00
@wwsww
@kn007
@R18
@kafka0102

萌新求轻拍,因为只是在试验阶段,本来就没做鉴权,所以本来就有着被别人删掉的觉悟的,只是没想到爬虫这一茬 0.0
mengli
    31
mengli  
   2017-01-22 15:47:29 +08:00
很喜感,吃一堑长一智吧
Cabana
    32
Cabana  
OP
   2017-01-22 15:47:31 +08:00
在新年之际能博大家一笑,这贴的目的已达到了。。。
dreamwar
    33
dreamwar  
   2017-01-22 15:48:52 +08:00
2333 笑死我了
hardensky
    34
hardensky  
   2017-01-22 15:49:57 +08:00
哈哈哈哈哈哈
isCyan
    35
isCyan  
   2017-01-22 15:50:07 +08:00
不是权限问题只是你不该用 GET 请求而已……
zhangneww
    36
zhangneww  
   2017-01-22 15:50:29 +08:00
对不起我也笑了,感谢楼主为周末上班的我送来欢乐
miyuki
    37
miyuki  
   2017-01-22 15:51:12 +08:00
本日最佳……
zenhand
    38
zenhand  
   2017-01-22 15:51:46 +08:00 via iPhone
哈哈哈哈哈哈
1OF7G
    39
1OF7G  
   2017-01-22 15:52:33 +08:00 via iPhone   2
前几天在看《精通 CSS 》里边提到这事(第二版 92 页),我还以为是个古老的笑话,没想到今天就遇到有人这样了
SoulGem
    40
SoulGem  
   2017-01-22 15:54:36 +08:00   1
哈哈哈哈哈哈对不起我也(善意的)笑了, Google :喵喵喵?
kba977
    41
kba977  
   2017-01-22 15:57:22 +08:00 via iPhone
哈哈哈,坐稳了,送你上今日最佳
/div>
tomato3
    42
tomato3  
   2017-01-22 16:02:29 +08:00
hhhhhhhhhhhhhhhhhhhhh
Cabana
    43
Cabana  
OP
   2017-01-22 16:04:29 +08:00
@isCyan 没写过前端,页面都是用的 v 友写的前端框架,也是懒 delete 请求还要另外写 js 代码就没搞,直接一个 url_for()就完了
TimePPT
    44
TimePPT  
PRO
   2017-01-22 16:17:12 +08:00 via iPhone
哈哈哈哈哈哈
fen
    45
fen  
   2017-01-22 16:18:39 +08:00
投诉 Google 去
Phariel
    46
Phariel  
   2017-01-22 16:19:15 +08:00
哈哈哈, 4 月 1 日可以搞个这种恶作剧,让写爬虫算法的大牛开始怀疑人生。
argc
    47
argc  
   2017-01-22 16:26:20 +08:00
哈哈哈哈哈
xcatliu
    48
xcatliu  
   2017-01-22 16:27:32 +08:00
笑出声了哈哈,感谢楼主带给我们快乐
GG668v26Fd55CP5W
    49
GG668v26Fd55CP5W  
   2017-01-22 16:29:20 +08:00
Are you kidding me?
julypanda
    50
julypanda  
   2017-01-22 16:29:25 +08:00
忍住不笑出声
wolfy123
    51
wolfy123  
   2017-01-22 16:33:59 +08:00
笑尿了
xiaolanglang
    52
xiaolanglang  
   2017-01-22 16:34:24 +08:00   9
用 GET 设计请求,除了爬虫意外,浏览器的预缓存功能也会坑你一把
之前也是有个人用 GET 请求做删除,他看哪一页哪一页就被删……他还以为是灵异事件呢……
colorfulberry
    53
colorfulberry  
   2017-01-22 16:36:09 +08:00
哈......哈.......哈,我是闪电
jyzhengqian
    54
jyzhengqian  
   2017-01-22 16:38:03 +08:00
哈哈哈哈哈
dozer47528
    55
dozer47528  
   2017-01-22 16:39:47 +08:00   2
Google 一脸懵逼:
页面呢?我刚刚才爬过的页面呢???
lzsadam
    56
lzsadam  
   2017-01-22 16:39:50 +08:00
/笑 cry

楼主的数据还在么?
bearqq
    57
bearqq  
   2017-01-22 16:40:45 +08:00   3
爬虫表示 : 我爬的文章呢,刚刚还在这儿的
http://www.biread.net/data/attachment/forum/201601/07/121956jm7mx4fh7bxobjj2.jpg

讲真,我写的博客没有做删除功能,只做了隐藏功能。
songsong
    58
songsong  
   2017-01-22 16:44:29 +08:00   1
在网站根目录建个 robots.txt
写上
<pre>
User-agent: *
Disallow: /
</pre>
songsong
    59
songsong  
   2017-01-22 16:44:49 +08:00
在网站根目录建个 robots.txt
写上

User-agent: *
Disallow: /
lurrpis
    60
lurrpis  
   2017-01-22 16:46:11 +08:00
今日最佳
Cabana
    61
Cabana  
OP
   2017-01-22 16:49:00 +08:00
@1OF7G 哈哈,特地去看了下,记住了涉及数据操作的链接用表单来做 0.0
kappa
    62
kappa  
   2017-01-22 16:49:06 +08:00
这博客系统写出来恐怕也没人敢用吧。。
iannil
    63
iannil  
   2017-01-22 16:50:25 +08:00
这是一个耿直的删除功能
quericy
    64
quericy  
   2017-01-22 16:53:07 +08:00
这个段子我好多年前看过。。。。。

啥?这是真事啊?
jotsai
    65
jotsai  
   2017-01-22 16:55:40 +08:00
这是一个没有戒备心的删除功能
JackyBao
    66
JackyBao  
   2017-01-22 16:57:31 +08:00
爬虫表示:怪我咯?
loading
    67
loading  
   2017-01-22 17:00:05 +08:00 via Android
get 版本删除……
HowardMei
    68
HowardMei  
   2017-01-22 17:02:08 +08:00 via Android
谷歌爬虫出名的眼亮脚快,这下懵逼了吧? 哈哈哈哈,乐成了。
artandlol
    69
artandlol  
   2017-01-22 17:13:56 +08:00
2333
luluuulu4848
    70
luluuulu4848  
   2017-01-22 17:14:06 +08:00
楼主 6
lj0014
    71
lj0014  
   2017-01-22 17:17:16 +08:00
真心笑了。。。
jelinet
    72
jelinet  
   2017-01-22 17:17:41 +08:00
今日最佳
xrlin
    73
xrlin  
   2017-01-22 17:19:12 +08:00
涉及到数据更改的请求 url ,为何不设置下 robots.txt
yetone
    74
yetone  
   2017-01-22 17:20:10 +08:00   1
楼主犯了几个常识性的(可能会被笑掉大牙的)错误:
1. 用 GET 方法进行 D(Delete) 操作: GET 方法只能进行 R(Read) 操作,用 GET 方法进行 CUD 操作就是作死
2. Delete 操作不验证权限:无法吐槽,过于蠢了
3. 把自己犯的这些过于羞耻的错误写在网上:脸皮厚或者做事不考虑后果

总结:活该!
gonglexin
    75
gonglexin  
   2017-01-22 17:20:43 +08:00
今日最佳
v2exhehehehe
    76
v2exhehehehe  
   2017-01-22 17:21:00 +08:00
需要补补基础了,楼主也是半路出家的吧
yetone
    77
yetone  
   2017-01-22 17:21:23 +08:00
@xrlin

这跟是否设置 robots.txt 没任何关系,是楼主的代码写得过于搓了
onionisi
    78
onionisi  
   2017-01-22 17:22:56 +08:00
对不起,我也笑了
SakuraKuma
    79
SakuraKuma  
   2017-01-22 17:24:03 +08:00
在公司笑出了声.
yywudi
    80
yywudi  
   2017-01-22 17:24:19 +08:00
笑出声...
flybears
    81
flybears  
   2017-01-22 17:25:03 +08:00
笑死我了....
wcong
    82
wcong  
   2017-01-22 17:25:15 +08:00
666666
bao3
    83
bao3  
   2017-01-22 17:26:22 +08:00 via Android
Google 被你坑了,刚爬完你的博客,结果就 404 了。。。。想想就想笑
everpcpc
    84
everpcpc  
   2017-01-22 17:26:26 +08:00
笑出声,耿直 boy
wooparadog
    85
wooparadog  
   2017-01-22 17:33:26 +08:00
lol
DoraJDJ
    86
DoraJDJ  
   2017-01-22 17:34:02 +08:00
删除功能用 GET 请求,还不验证用户权限,该。
yaoxuwang
    87
yaoxuwang  
   2017-01-22 17:37:42 +08:00
厉害了 233333
crayygy
    88
crayygy  
   2017-01-22 17:38:08 +08:00 via iPhone
今日笑点最佳
nanjishidu
    89
nanjishidu  
   2017-01-22 17:40:23 +08:00
感谢
arzusyume
    90
arzusyume  
   2017-01-22 17:47:19 +08:00
年度最佳
wangxiaoer
    91
wangxiaoer  
   2017-01-22 17:49:16 +08:00 via Android
只想知道你的删除地址是怎么暴露的?难道直接在文章页面加了链接??
sinker
    92
sinker  
   2017-01-22 17:50:54 +08:00 via iPhone
感谢楼主 hhhh
Zzzzzzzzz
    93
Zzzzzzzzz  
   2017-01-22 18:01:16 +08:00
权限检测倒不是唯一的锅,删除别用 GET, 不然就算不被 google bot 干掉, 也有可能被带 prefetch 的浏览器干掉
hebeiround
    94
hebeiround  
   2017-01-22 18:02:06 +08:00 via iPhone
笑了又笑
manklnd
    95
manklnd  
   2017-01-22 18:02:52 +08:00
2333
hhhc1998
    96
hhhc1998  
   2017-01-22 18:04:00 +08:00
感觉看了这个帖子整个人都开心了起来
inisun
    97
inisun  
   2017-01-22 18:14:26 +08:00   7
阅后即焚的升级版:爬完即焚
nicevar
    98
nicevar  
   2017-01-22 18:16:18 +08:00
真是萌新啊,哈哈哈哈
Matrixbirds
    99
Matrixbirds  
   2017-01-22 18:21:32 +08:00
谷歌:怪我喽?
haozibi
    100
haozibi  
   2017-01-22 18:23:20 +08:00 via Android
翻页
1  2  3  
关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     3004 人在线   最高记录 6679       Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 39ms UTC 13:17 PVG 21:17 LAX 05:17 JFK 08:17
Do have faith in what you're doing.
ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86