C#.Net基于正则表达式抓取百度百家文章列表的方法示例

概述本文实例讲述了C#.Net基于正则表达式抓取百度百家文章列表的方法。分享给大家供大家参考，具体如下：

本文实例讲述了C#.Net基于正则表达式抓取百度百家文章列表的方法。分享给大家供大家参考，具体如下：

工作之余，学习了一下正则表达式，鉴于实践是检验真理的唯一标准，于是便写了一个利用正则表达式抓取百度百家文章的例子，具体过程请看下面源码：

一、获取百度百家网页内容

public List<string[]> GetUrl(){  try  {    string url = "http://baijia.baIDu.com/";    WebRequest webRequest = WebRequest.Create(url);    WebResponse webResponse = webRequest.GetResponse();    StreamReader reader = new StreamReader(webResponse.GetResponseStream());    string result = reader.ReadToEnd();    reader.Close();    webResponse.Close();    return AnalysisHTML(result);  }  catch (Exception ex)  {    throw ex;  }}

二、通过正则表达式筛选

public List<string[]> AnalysisHTML(string HTMLContent){  List<string[]> List = new List<string[]>();  string strPattern = "<h3><a\s*.*>(?<Title>[^<]+)</a></h3>.*\s*<p\s*class=\"Feeds-item-text\">(?<Abstract>[^<]+)<a\s*href=\"(?<Url>.*)\"\s*target=\"_blank\"\s*class=\"Feeds-item-more\"\s*mon=\".*\s*\">.*\s*</a></p>";  Regex regex = new Regex(strPattern,RegexOptions.IgnoreCase | RegexOptions.Multiline | RegexOptions.CultureInvariant);  if (regex.IsMatch(HTMLContent))  {    MatchCollection matchCollection = regex.Matches(HTMLContent);    foreach (Match match in matchCollection)    {      string[] str = new string[3];      str[0] = match.Groups[1].Value;//获取到的是列表数据的标题      str[1] = match.Groups[2].Value;//获取到的是内容      str[2] = match.Groups[3].Value;//获取到的是链接到的地址      List.Add(str);    }  }  return List;}

附：完整实例代码点击此处本站下载。

PS：这里再为大家提供2款非常方便的正则表达式工具供大家参考使用：

@R_404_3715@正则表达式在线测试工具：
http://tools.jb51.net/regex/javascript

正则表达式在线生成工具：
http://tools.jb51.net/regex/create_reg

更多关于C#相关内容感兴趣的读者可查看本站专题：《C#正则表达式用法总结》、《C#编码 *** 作技巧总结》、《C#常见控件用法教程》、《WinForm控件用法总结》、《C#数据结构与算法教程》、《C#面向对象程序设计入门教程》及《C#程序设计之线程使用技巧总结》

希望本文所述对大家C#程序设计有所帮助。

总结

以上是内存溢出为你收集整理的C#.Net基于正则表达式抓取百度百家文章列表的方法示例全部内容，希望文章能够帮你解决C#.Net基于正则表达式抓取百度百家文章列表的方法示例所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错，欢迎将内存溢出网站推荐给程序员好友。