寻求开发人员

现需求网站域名和关键字搜索开发人员。比如输入“汽车”，可是搜索到绝大多数的包含“汽车”的网页，并把标题，网址等分拣出来添加到数据库中。并不是通过Google等搜索引擎，因为各搜索引擎显示搜索到几百万条，而只能是显示前几千条。现在要求的是要能把这搜索到的几百万条全部添加到数据库中。如过那位高手有此技术请联系：13910290608，李先生。

7 个解决方案

#1

对google的搜索结果遍历一次不就得到所有结果了。
库是sqlServer的话，先写到文本。bulk insert 入库不就行了。

#2

crazy,几百万条入库！

#3

nimweb(菜鸟候补)，google的搜索结果只能显示前1000条左右啊。

#4

我去仔细看了一下。确实如你说的显示数量没超过1000，百度的也一样。

它都不显示，那我也没办法了。

http://www.google.com/search?q=%E6%B1%BD%E8%BD%A6&hl=zh-CN&lr=lang_zh-CN&ie=UTF-8&oe=UTF-8&start=0&sa=N

http://www.google.com/search?q=%E6%B1%BD%E8%BD%A6&hl=zh-CN&lr=lang_zh-CN&ie=UTF-8&oe=UTF-8&start=140&sa=N

上面是搜索“汽车”第一页和第十五页的链接

#5

不知道WebService的Google是否提供

#6

友情支持。

#7

这个能不能实现呢?

#1