首页 新闻 搜索 专区 学院

关于蜘蛛爬行器的

0
[已关闭问题]

请问怎样将蜘蛛爬行器(用c#做的)爬行下来的网页直接保存在sql数据库中呢????????

 

问题补充: 爬下来会,,但是如何将网页存进数据库就不会了
琳琳的主页 琳琳 | 初学一级 | 园豆:200
提问于:2009-03-22 20:00
< >
分享
其他回答(5)
0

爬完了,写入数据库被。

 

你是不会爬,还是不会写?

llj098 | 园豆:825 (小虾三级) | 2009-03-22 20:21
0

参考下俺这个吧.俺这个爬完了只是生成.txt文件而已哈.

http://airwolf2026.cnblogs.com

波波塔 | 园豆:638 (小虾三级) | 2009-03-22 20:45
0

就把想保存的结果以文本的形式保存到数据库中就行了。

侯垒 | 园豆:3435 (老鸟四级) | 2009-03-22 21:31
0

借这个帖子问问这几天遇到的问题,

我想爬的网页中有用javascript输出片段的,比如设置某元素的innerHTML,现在要怎么获取这个元素的内容呢?像这种的要怎么爬呢??

止戈 | 园豆:165 (初学一级) | 2009-03-22 22:28
0

借这个帖子问问这几天遇到的问题,

我想爬的网页中有用javascript输出片段的,比如设置某元素的innerHTML,现在要怎么获取这个元素的内容呢?像这种的要怎么爬呢??

这你得借助浏览器了,下载经浏览器渲染并执行脚本之后的页面,我猜想采用WinForm的WebBrowser控件应该可以实现,就是在载入页面后调取其Document对象的innerHTML属性。

 

斯克迪亚 | 园豆:4124 (老鸟四级) | 2009-03-23 03:57
0

蜘蛛.其实主要是利用“正则表达式”.实现网页的识别.并对sqlserver进行“高效率的索引检索”,来判断数据库中“是否有这个链接”。来对数据库的信息进行维护.

邢少 | 园豆:10926 (专家六级) | 2009-03-23 10:44
清除回答草稿
   您需要登录以后才能回答,未注册用户请先注册