24小时热门版块排行榜    

查看: 3997  |  回复: 9

王展昭

新虫 (小有名气)

[交流] 今年不知道还有没有爬虫大神 已有8人参与

今年不知道还能还能用网络爬虫爬结果,上年有一个爬虫大神利用短暂的漏洞时间,爬了不少中标的项目

发自小木虫Android客户端
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

楞严金刚

禁虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
本帖内容被屏蔽

2楼2021-08-10 11:58:51
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

caiqing

铁杆木虫 (著名写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
2楼: originally posted by 楞严金刚 at 2021-08-10 11:58:51
这是违法的有被判刑的

无语
3楼2021-08-10 12:04:13
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

王展昭

新虫 (小有名气)

引用回帖:
2楼: Originally posted by 楞严金刚 at 2021-08-10 11:58:51
这是违法的有被判刑的

原则上是的,不过上年延期了一个月,大家都等的心浮气躁,另外,基金委也没那么小气

发自小木虫Android客户端
4楼2021-08-10 12:05:08
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yzy202

新虫 (正式写手)

5楼2021-08-10 12:06:30
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

clive931

金虫 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
3楼: Originally posted by caiqing at 2021-08-10 12:04:13
为什么?
网站在那儿,我上网,你不用管我用啥手段吧。
不给做那,不给说这,,,,
限制太多、框架太多,必然将各种创新扼杀掉。...

这个想法很危险。有一个叫非法获取计算机信息系统数据罪,建议百度一下。

发自小木虫Android客户端
6楼2021-08-10 12:07:34
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

柠萌粉

铜虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
3楼: originally posted by caiqing at 2021-08-10 12:04:13
为什么?
网站在那儿,我上网,你不用管我用啥手段吧。
不给做那,不给说这,,,,
限制太多、框架太多,必然将各种创新扼杀掉。...

楼上说的罪名是一方面,另一方面,网站是否允许爬虫是有行规的,会写一个robots.txt的文件放在网站根目录
看看isisn是怎么写的(https://isisn.nsfc.gov.cn/robot.txt):
user-agent: *
disallow: /
第二行的意思就是,所有目录都不允许爬取。
当然可以无视这个文件,但是这个文件代表了官方的态度

不过不得不吐槽一下他们负责网站建设的人,这个robot.txt应该写成robots.txt,这个错误导致了百度在爬他们的网站
7楼2021-08-10 12:17:34
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yzb85

木虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
3楼: Originally posted by caiqing at 2021-08-10 12:04:13
为什么?
网站在那儿,我上网,你不用管我用啥手段吧。
不给做那,不给说这,,,,
限制太多、框架太多,必然将各种创新扼杀掉。...

按照这种逻辑ATM无故吐钱不还就不需要定罪了
8楼2021-08-10 12:18:48
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

为了十年后

新虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
2楼: Originally posted by 楞严金刚 at 2021-08-10 11:58:51
这是违法的有被判刑的

有道理 判刑基金委的网络维护人员故意放漏洞

发自小木虫IOS客户端
9楼2021-08-10 12:33:27
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

且听虎啸

捐助贵宾 (小有名气)


小木虫: 金币+0.5, 给个红包,谢谢回帖
我不敢。。。。就算爬了 也不会公开
10楼2021-08-10 15:07:16
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 王展昭 的主题更新
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 环境调剂 +3 晓看天暮看云 2026-03-09 3/150 2026-03-10 00:34 by wdwdoo
[考研] 294 英二数二物化 求调剂 +6 米饭团不好吃 2026-03-09 6/300 2026-03-09 23:55 by barlinike
[考研] 320求调剂 +4 魏zy 2026-03-08 4/200 2026-03-09 16:14 by ruiyingmiao
[考研] 材料与化工求调剂 +8 与冬清宁 2026-03-07 10/500 2026-03-09 13:45 by Wahxp
[考研] 一志愿中科大材料与化工。353分能调剂到哪? +3 MayUxw1 2026-03-08 3/150 2026-03-09 10:13 by EBSD
[考研] 337求调剂 +3 睡醒,。 2026-03-09 3/150 2026-03-09 10:02 by 求调剂zz
[考研] 医学检验专业26考研求调剂 +3 琪ya 2026-03-03 5/250 2026-03-08 22:56 by 清风月
[考研] 083000环境科学与工程调剂 +5 加油呀fxy 2026-03-07 6/300 2026-03-08 21:07 by sdgdsdgd
[考研] 324求调剂 +9 wxz2 2026-03-03 13/650 2026-03-08 20:34 by 闲人终南山
[考研] 化学工程与技术316求调剂 +7 Sixuan wang 2026-03-06 7/350 2026-03-08 11:23 by 我的船我的海
[考研] 一志愿211 化学305分求调剂 +3 0703杨悦305分 2026-03-05 3/150 2026-03-07 21:15 by yinhuanshun
[考研] 化学290求调剂 +3 两颗 西柚 2026-03-07 4/200 2026-03-07 20:55 by macy2011
[考研] 一志愿武汉理工085601,初试301分,请问能调剂到湖北吗 +3 肖yang 2026-03-06 3/150 2026-03-07 19:08 by ms629
[考研] 085602高分子方向求调剂 +7 tlgudy 2026-03-04 7/350 2026-03-06 14:17 by guosr9609
[考博] 2026申博自荐 六级440电催化方向 +4 樱落成影花成双 2026-03-05 4/200 2026-03-06 07:57 by L135790
[考研] 274环境工程求调剂 +6 扶柳盈江 2026-03-05 6/300 2026-03-05 13:16 by 梦天888
[考研] 材料328求调剂 +10 一个萝卜02 2026-03-03 10/500 2026-03-05 09:31 by oxidpl
[考研] 293求调剂 +3 是乐渝哇 2026-03-04 3/150 2026-03-04 23:12 by wutongshun
[考研] 307求调剂 +4 xuyuan111 2026-03-04 5/250 2026-03-04 20:39 by kakakapanpan
[考研] 292求调剂 +3 sgbl 2026-03-03 3/150 2026-03-03 17:30 by barlinike
信息提示
请填处理意见