ASP.net(C#)从其他网站抓取内容并截取有用信息的实现代码


1. 需要引用的类库

复制代码 代码如下:

using System.Net;
using System.IO;
using System.Text;
using System.Text.RegularExpressions;

2. 获取其他网站网页内容的关键代码
复制代码 代码如下:

WebRequest request = WebRequest.Create("http://目标网址.com/");
WebResponse response = request.GetResponse();
StreamReader reader = new StreamReader(response.GetResponseStream(), Encoding.GetEncoding("gb2312"));
//reader.ReadToEnd() 表示取得网页的源码
TextBox1.Text = reader.ReadToEnd();

3. 获取其他网站网页源码之后通过{正则表达式}帅选有用信息
复制代码 代码如下:

MatchCollection TitleMatchs = Regex.Matches(reader.ReadToEnd(), @"发表评论</a></p></div><div class=""body"">([\s\S]*?)</div><div class=""share"">", RegexOptions.IgnoreCase | RegexOptions.Multiline);
foreach (Match NextMatch in TitleMatchs)
{
s += "<br>" + NextMatch.Groups[1].Value;
TextBox1.Text += "\n" + NextMatch.Groups[1].Value;
}

RegexOptions.IgnoreCase: 表示不区分大小写, 一般网站源码大小写不敏感所以取消之.

RegexOptions.Multiline: 表示对多行内容进行帅选.
4. 大功告成
不上图了! 影响不好! 见谅见谅
文中代码打包下载



相关阅读:
WordPress 3.0即将发布CMS功能增强
我的一些css学习心得
修改jQuery Validation里默认的验证方法
CSS教程:CSS兼容的技巧
javascript引用对象的方法
CSS3的border-radius属性定义HTML元素的圆角
Jquery中增加参数与Json转换代码
用PHP和AJAX创建RSS聚合器(1)
基于Snoopy的PHP近似完美获取网站编码的代码
PHP 网页过期时间的控制代码
CSS教程:总结清除浮动的方法
Unix/Linux下通过远程桌面连接Windows OS
判“新”函数:得到今天与明天的秒数
php中变量及部分适用方法
快速导航

Copyright © 2016 phpStudy |