24小时热门版块排行榜    

查看: 854  |  回复: 3

sjtu2012

银虫 (著名写手)

[交流] 网络爬虫技术和一般的网络搜索技术功能和原理上有何不同哈 已有3人参与

网络爬虫技术和一般的网络搜索技术功能和原理上有何不同哈?
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

netivs

专家顾问 (知名作家)

DataHacker


小木虫: 金币+0.5, 给个红包,谢谢回帖
搜索是搜索、爬虫是爬虫,两个完全不一样的概念。爬虫一般是用来模拟浏览器的用户操作实现对网站数据的采集的,而网络搜索是用来查找网络上是否存在某个数据的。只是通用的搜索引擎一般都需要用爬虫来获取数据,所以一般搜索引擎系统中都含有爬虫(作为搜索引擎系统的子系统或组件)。但是爬虫实际上并不是必须的,比如现在淘宝开放了商品访问的API,你要是有授权,不需要使用爬虫也可以获得相应的数据,基于这样的开放接口来开发的搜索引擎(提供商品搜索功能)就完全不需要用到爬虫。
机器学习爱好者
2楼2015-03-17 12:04:18
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sjzlyl406

金虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
推荐你看看吴军的数学之美。

[ 发自小木虫客户端 ]
君子不争!!!
3楼2015-03-17 23:41:41
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sx念

铜虫 (正式写手)


小木虫: 金币+0.5, 给个红包,谢谢回帖
引用回帖:
2楼: Originally posted by netivs at 2015-03-17 12:04:18
搜索是搜索、爬虫是爬虫,两个完全不一样的概念。爬虫一般是用来模拟浏览器的用户操作实现对网站数据的采集的,而网络搜索是用来查找网络上是否存在某个数据的。只是通用的搜索引擎一般都需要用爬虫来获取数据,所以 ...

你好,看了您的评论之后,我想问您一下,爬虫程序怎么用啊?我不是计算机专业的学生,但是现在我需要爬j虫程序帮助我手机一些数据,希望您能在百忙之后帮帮我。
4楼2015-07-11 12:39:09
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 sjtu2012 的主题更新
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考博] 澳大利亚 Murdoch University 全奖博士招生(3个名额)地质化工冶金领域 +51 AI8RaGaPaSCR 2026-08-07 54/2700 2026-08-14 03:15 by 51OlFEHbqXvR
[基金申请] 我的国基提前知道中了,可是同事的操作让我实在接受不了,怎么会有这样的人 +10 家与远方 2026-08-10 15/750 2026-08-14 02:08 by 绵羊哥哥
[基金申请] 关于Filecode分析方法 +9 majunge000 2026-08-10 12/600 2026-08-13 23:20 by iwuli
[基金申请] 咱们一起用铁证分析2026国家社科基金中标与否 +3 启萌科技 2026-08-12 11/550 2026-08-13 22:57 by 启萌科技
[文学芳草园] 阿姨 +4 汪汪锅 2026-08-09 4/200 2026-08-13 19:43 by arzu_hma
[基金申请] 静等基金结果 +8 gjjjzhong 2026-08-10 21/1050 2026-08-13 17:56 by 且听虎啸
[基金申请] 重要来源:本周末出结果 +10 瞬息宇宙 2026-08-12 10/500 2026-08-13 15:46 by likettle
[基金申请] 不应该看fileCode +7 且听虎啸 2026-08-12 9/450 2026-08-13 14:27 by flydreamws
[基金申请] 分享一下我之前已中青C的计划书的filecode +4 布布和一二 2026-08-11 5/250 2026-08-13 12:56 by cratir
[基金申请] 2019年青年基金涵评意见,大家看看几个A,几个B? +11 Tide man 2026-08-11 11/550 2026-08-13 07:35 by 撸猫猫
[基金申请] 好奇怪的filecode +5 布布和一二 2026-08-08 6/300 2026-08-12 16:11 by 云上清扬
[基金申请] 奇怪,两个人的filecode固定段从头到尾一模一样 +7 布布和一二 2026-08-10 10/500 2026-08-12 09:12 by 布布和一二
[基金申请] 帮忙看看fileCode +7 wwncly 2026-08-10 13/650 2026-08-11 19:36 by 冰心玉壶晴
[硕博家园] 读博的好处 +3 lnee 2026-08-11 3/150 2026-08-11 18:10 by 希望我好好的
[基金申请] 什么时候出结果,有咨询渠道??? +3 Tide man 2026-08-11 3/150 2026-08-11 17:54 by kudofaye
[基金申请] 确定了,国自然21号放榜 +6 布布和一二 2026-08-10 7/350 2026-08-10 19:15 by 2000zf36392
[基金申请] 这样的filecode谁见过 +11 布布和一二 2026-08-08 22/1100 2026-08-10 11:10 by wmfsnow
[基金申请] filecode与中标关系的预测 +5 布布和一二 2026-08-07 5/250 2026-08-09 16:15 by 袁向阳007
[基金申请] 关于filecode +4 布布和一二 2026-08-07 7/350 2026-08-07 22:55 by zhanghaozhu
[基金申请] filecode变化情况 +6 布布和一二 2026-08-07 22/1100 2026-08-07 14:45 by 且听虎啸
信息提示
请填处理意见