局域网爬虫怎么实现？？

Question

爬虫不分什么局域网非局域网吧。有URL就行

Answer 1

我也在用别人写的一个类似的程序（叫lanSearch），好像是C++写的，但是我没有源码？
谁有C#源码，贴出来共享一下啊！非常感谢

Answer 2

看Lucene吧,有C#版的
http://www.cnblogs.com/lhdyesok/articles/1272676.html

Answer 3

一直都对搜索引擎有着非常好奇的心，就是郁闷没地方可以学习这个技术，听说这个技术并不是非常普遍的公开，不知道这是不是事实，很想懂老大们出来说几句，指点一下像我们这些小菜鸟们是否有幸也能学习一下这种技术，就算是学不会，也甘心了。
呵呵，我所说的就是像百度、Google他们那种搜索，到底能让普通菜鸟有机会学习到吗？很想了解一下这个神秘的东西到底是用什么弄出来的，并且在搜索时速度如此之快的得出相关的结果，像这种海量级数据技术，真让人感到羡慕不已，并且似乎遥远莫及，难道就只有进了那种公司才能够接触与学习这个技术吗？难道这个技术就真的是非公开性的技术吗？这种垄断就太让人郁闷了。