有熟悉爬虫技术的人么? 要做个类似tuan800.com的站

风继续吹 · 发表于 2012-1-22 15:38:39

提示: 作者被禁止或删除内容自动屏蔽

公鸡 · 发表于 2012-1-22 15:41:20

方维系统

puper · 发表于 2012-1-22 15:51:41

风继续吹发表于 2012-1-22 15:38
需要爬虫的,因为要主动爬目标站内进行更新.

就是采集而已，当然也算爬虫

风继续吹 · 发表于 2012-1-22 16:07:08

提示: 作者被禁止或删除内容自动屏蔽

风继续吹 · 发表于 2012-1-22 16:07:55

提示: 作者被禁止或删除内容自动屏蔽

一步一杀 · 发表于 2012-1-22 16:12:52

puper 发表于 2012-1-22 15:36
这个没什么爬虫，采集而已，每个团购站一个规则，用火车挂着就行

+1

puper · 发表于 2012-1-22 16:18:51

风继续吹发表于 2012-1-22 16:07
很多爬虫是基于JAVA平台来做的,太庞大了(例如www.pkprice.com)

这个就是按规则采集而已，无非就是自动采集，定时采集而已，把分类和地区对应一下，这个数据量是有限的。比价网当然需要更智能，比如同一个产品在不同商家名字有区别，数据量太大，必须智能筛选+人工处理，爬虫就那样，复杂的是数据处理过程，你可以搜下小熊比价网的开发过程

风继续吹 · 发表于 2012-1-22 16:40:28

提示: 作者被禁止或删除内容自动屏蔽

puper · 发表于 2012-1-22 16:50:49

风继续吹发表于 2012-1-22 16:40
搜不到小熊比价网的开发文档.

非开发文档，就是一部分记录

http://blog.sina.com.cn/beargoo

公鸡 · 发表于 2012-1-22 17:19:15

风继续吹发表于 2012-1-22 16:07
公鸡知道的东西还不少啊,有QQ吗? 这个方维系统中的分享我早就在找了.

http://www.fanwe.com/
产品中心

		自动登录	找回密码
密码			注册

风继续吹风继续吹当前离线积分 2922	11^# 楼主\| 发表于 2012-1-22 15:38:39 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
风继续吹风继续吹当前离线积分 2922
	回复支持反对举报

风继续吹风继续吹当前离线积分 2922	14^# 楼主\| 发表于 2012-1-22 16:07:08 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
风继续吹风继续吹当前离线积分 2922
	回复支持反对举报

风继续吹风继续吹当前离线积分 2922	15^# 楼主\| 发表于 2012-1-22 16:07:55 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
风继续吹风继续吹当前离线积分 2922
	回复支持反对举报

风继续吹风继续吹当前离线积分 2922	18^# 楼主\| 发表于 2012-1-22 16:40:28 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
风继续吹风继续吹当前离线积分 2922
	回复支持反对举报