Uestc95的空间站 - 火星就是地球的未来?...

如果你有一个苹果，我有一个苹果，我们交换以后还是一人一个苹果，但如果你有一种思想，我有一种思想，我们交换以后，每个人便拥有了两种思想。
随笔 - 129, 评论 - 1290, 引用 - 44

导航

关于


MSN：
uestc95 at GMail.com

Mail：　
uestc95 at GMail.com

另一个博客
博思 - 汇聚思想间的碰撞

欢迎交流！

标签

每月存档

最新留言

广告
 
Web Spider的一些资料

最近要开始Web Spider的开发工作，陆续收集了一些资料，分享一下，等Spider开发完毕后再将开发心得整理一下。

The Web Robots Pages : http://www.robotstxt.org/wc/robots.html ,一些很好的规则定义以及定义了Robots协议

Guidelines for Robot Writers : http://www.robotstxt.org/wc/guidelines.html

SearchTools.com:  http://www.searchtools.com/robots/ ,All About Search Indexing Robots and Spiders

中文搜索引擎技术揭密：网络蜘蛛

中文搜索引擎技术揭密： 中文分词

中文搜索引擎技术揭密：排序技术

中文搜索引擎技术揭密：系统架构

 

打印 | 张贴于 2004-09-27 23:46:00 | Tag:程序人生

 

留言反馈

#回复: Web Spider的一些资料 编辑
能否发给兄弟一份啊？
johnlenon21@163.com
万分感谢！
2008-01-22 17:21:00 | [匿名:Tony]
#回复: Web Spider的一些资料 编辑
我最近也正在做这个,看到博主发的这些,非常高兴.希望能得到一些帮助!
2007-07-30 16:12:00 | [匿名:小破孩]
#re: Web Spider的一些资料 编辑
谁有这方面的资料，发一下啦，先谢过了
mingliang.zhao@gmail.com

MSN:mingliang.zhao@hotmail.com

2006-10-09 11:18:00 | [匿名:chaos]
#re: Web Spider的一些资料 编辑
good
2006-09-29 00:00:00 | [匿名:god]
#re: Web Spider的一些资料 编辑
有冇地方教寫SPIDER 用C#
或者有FILE 參考下 好似google yahoo 個類
MSN:changto1226@hotmail.com
2006-09-16 00:51:00 | [匿名:leo]
#re: Web Spider的一些资料 编辑
能不能把中文的资料发一下
谢了
gefu007@163.com
2006-09-01 19:44:00 | [匿名:gefu]
#re: Web Spider的一些资料 编辑
谢谢先，中文资料发一下，我下载不了
Email:ansonxy@gmail.com
MSN:dingxi819@yahoo.com.cn
2006-08-31 11:55:00 | [匿名:仰天一笑]
#re: Web Spider的一些资料 编辑
请把文中无法连接的几篇中文资料发一下，谢谢！
fwssoft@gmail.com
2006-08-16 10:23:00 | [匿名:fwssoft]
#re: Web Spider的一些资料 编辑
正在着手研究比较购物应用的搜索引擎技术，与大家沟通讨论。
msn:xiefei21@163.net
QQ:66892865
2006-08-15 23:19:00 | [匿名:fwssoft]
#re: googel Spider中的详解 编辑
Google中的Spider的是怎么一回事呢
我一直都不明白，上网找了一资料
也不是很详细，
有知道的请告诉我啊
我的QQ是：306798885
E-mail:ccpu2008@sina.com
有顺随问一下有谁要服务器托管租用啊
请来的服务世界：www.7dun.com
2006-07-14 14:46:00 | [匿名:三万公尺的距]
#re: googel Spider中的详解 编辑
Google中的Spider的是怎么一回事呢
我一直都不明白，上网找了一资料
也不是很详细，
有知道的请告诉我啊
我的QQ是：306798885
E-mail:ccpu2008@sina.com
有顺随问一下有谁要服务器托管租用啊
请来的服务世界：www.7dun.com
2006-07-14 14:46:00 | [匿名:三万公尺的距]
#re: Web Spider的一些资料 编辑
很想学习这一方面知识
最近才开始
很多东西也不懂
留个名，以后不懂的再来问
MSN：xiaoyaowp#hotmail.com
2006-07-13 16:30:00 | [匿名:乐乐鸟]
#Web Spider的一些资料 编辑
谢谢您的分享
2006-05-24 03:58:00 | [匿名:圣涛玄纯]
# Web Spider的一些资料 编辑
ykzj 您好 我看看您的C# 1.1FrameWork的，我的邮箱 majintao1982@gmail.com QQ:153932643
2006-05-24 03:56:00 | [匿名:圣涛玄纯]
#re: Web Spider的一些资料 编辑
找到一个c#的，但是是1.1的FrameWork的，在2.0中运行会抛出异常，说的是不能从另外一个线程中访问，不知道谁能修改一下？
2006-05-08 20:22:00 | [匿名:ykzj]
#re: Web Spider的一些资料 编辑
我是新手，得向大家请教啊！
我的邮件地址：jorchen@gmail.com
2006-03-24 13:26:00 | [匿名:JORCHEN]
#re: Web Spider的一些资料 编辑
我现在正在着手东西的开发，我是新手，得向大家请教啊！
我的邮件地址：shenjiaolin@yahoo.com.cn
2006-03-16 10:46:00 | [匿名:想飞的鱼]
#re: Web Spider的一些资料 编辑
我也想要一下中文资料,刚开始研究很多都不懂啊
31354805@qq.com
多谢
2006-03-09 16:46:00 | [匿名:SkySea]
#re: Web Spider的一些资料 编辑
我也想要一下中文资料
，刚开始研究很多都不懂啊~
soloist_zhuzhu@yahoo.com.cn
2006-01-12 10:32:00 | [匿名:marcos]
#re: Web Spider的一些资料 编辑
我也想要一下中文资料
kabbesy@hotmail.com
多谢
2006-01-06 17:45:00 | [匿名:kabbesy]
#re: Web Spider的一些资料 编辑
功能强大啊!
想学习,zhangdonghy@hotmail.com
2005-11-27 22:39:00 | [匿名:dong]
#re: Web Spider的一些资料 编辑
我以前也想做，可最后还是没开始

最近想聚集些朋友一起研究，有谁有兴趣的可以加

QQ群：搜索引擎技术 号：8159304
大家一起交流
2005-11-14 18:41:00 | [匿名:感石]
#re: Web Spider的一些资料 编辑
又没有谁有Jeff Heaton的Bot开发包？麻烦发给我一个，谢谢。邮箱地址：qianyiqqq@hotmail.com
2005-10-18 15:18:00 | [匿名:king]
#re: Web Spider的一些资料 编辑
我也在做搜索引擎,很希望和大家一起交流一下!QQ:9289147
EM:pdz2015@163.com
2005-10-08 15:41:00 | [匿名:IT搜索]
#re: Web Spider的一些资料 编辑
网页采集、解析、入库。特别是解析、入库，能给点帮助吗？谢谢！
2005-09-22 23:12:00 | [匿名:网博天下]
#re: Web Spider的一些资料 编辑
我最今打算做一个搜索引擎，希望可以在此认识些朋友共同发展
我的msn:yang@ganshi.com
2005-08-24 04:53:00 | [匿名:失落天堂]
#re: Web Spider的一些资料 编辑
yunefan@gmail.com
MSN：yunefan@hotmail.com
这个人叫白耘帆,整个西安的IT圈中都知道他是个十足的大骗子,并且骗好多人的钱都不还
2005-07-28 05:34:00 | [匿名:asp]
#re: Web Spider的一些资料 编辑
Re：小马过河
本人的IISCIA就是用vb.NET开发的，原来想过用c#，后来听说有针对c#的反编译器，所以就用vb.NET了^--^
2005-06-22 14:51:00 | [匿名:深蓝医生]
#re: Web Spider的一些资料 编辑
哇，这么多人啊！
我最近也要用C#做一个爬虫，我知道Larbin算法不错，但是不知道哪里有C#版本的？
各位大虾能否帮小弟的忙？很想了解你们做得东东。
欢迎交流！
yunefan@gmail.com
MSN：yunefan@hotmail.com
2005-05-21 16:24:00 | [匿名:Yunefan]
#re: Web Spider的一些资料 编辑
谢谢楼主先，
看到有朋友一起，很高兴！
liujun960@hotmail.com
2005-05-12 10:02:00 | [匿名:960食指]
#re: Web Spider的一些资料 编辑
网页采集、解析、入库。特别是解析、入库，能给点帮助吗？谢谢！
sungreatfire@163.com
2005-05-10 19:36:00 | [匿名:王爷]
#re: Web Spider的一些资料 编辑
有哪位达人能给我一些启发吗？

cat_one603@yahoo.com.cn
2005-04-25 21:16:00 | [匿名:小马过河]
#re: Web Spider的一些资料 编辑
有人用过vb。net开发网络蜘蛛吗??

希望能有人指点 一下我～
2005-04-25 21:12:00 | [匿名:小马过河]
#re: Web Spider的一些资料 编辑
怎么上面的链接打不开的?
2005-04-07 01:51:00 | [匿名:jingren_fz]
#re: Web Spider的一些资料 编辑
我对Spider也非常有兴趣, 特别是分词技术, 希望能够跟大家交流

jingren_fz@hotmail.com
2005-04-07 00:09:00 | [匿名:jingren_fz]
#re: Web Spider的一些资料 编辑
欢迎加入QQ群：8797792
2005-03-31 00:22:00 | [匿名:TeffGuo]
#re: Web Spider的一些资料 编辑
各位老大，我最近也要做网络蜘蛛这东东了
不太懂／
哪位有资料麻烦共享一下，
感谢
我的ＭＳＮ：javadanny@hotmail.com
2005-03-23 15:23:00 | [匿名:danny]
#[转载]Web Spider的一些资料 编辑
源自：http://blog.joycode.com/uestc95/archive/2004/09/27/34582.aspx最近要开始Web Spider的开发工作，陆续收集了一些资料，分享一下，等Spider开发完毕后再将开发心得整理一下。The Web Robots Pages : http://www.robotstxt.org/wc/robots.html ,一些很好的规则定
2005-02-23 19:01:00 | [匿名:Pinson专栏]
#re: Web Spider的一些资料 编辑
各位高手，我最近在研究Spider的程序，看了好多资料，但还是有点不明白。有为带说明的原码，给小弟研究以下。谢谢了！！！！yuzhu_fish@126.com
2005-01-20 16:37:00 | [匿名:fish]
#re: Web Spider的一些资料 编辑
我的油箱是：hdj_05@sohu.com谢了，老大！！
2005-01-05 16:34:00 | [匿名:过河卒]
#re: Web Spider的一些资料 编辑
我的邮箱是：wanjietang@126.com,谢谢了！
2005-01-02 16:51:00 | [匿名:tangtang]
#re: Web Spider的一些资料 编辑
我最近在做一个先把网页抓取下来再进行分析的系统，哪位师傅会，恳请麻烦指教一下，实在是新手，好多都不会！谢谢了！
2005-01-02 16:49:00 | [匿名:tangtang]
#re: Web Spider的一些资料 编辑
能不能把几篇中文资料发一下，谢谢！
lixiang216@126.com
2004-10-11 20:55:00 | [匿名:做人要厚道]
#re: Web Spider的一些资料 编辑
谢谢分享


我也收集了一些 ， 用来 作 网页解析
2004-09-28 12:32:00 | [匿名:田春峰]
#re: Web Spider的一些资料 编辑
谢谢——————
2004-09-28 09:53:00 | [匿名:tintin]
对不起，目前本随笔不允许发表新评论.

Powered by: Joycode.MVC引擎 0.5.2.0

Copyright © Uestc95的空间站 - 火星就是地球的未来?...