实例介绍
【实例简介】
【实例截图】
【实例截图】
【核心代码】
using System;
using System.Collections.Generic;
using System.IO;
using System.Linq;
using System.Net;
using System.Text;
using System.Text.RegularExpressions;
using System.Threading.Tasks;
namespace 正则提取
{
class Program
{
private static HttpWebRequest myHttpWebRequest;
static void Main(string[] args)
{
//采集部分
Console.WriteLine("编号");
int t = int.Parse(Console.ReadLine());
Console.WriteLine("开始页");
int i = int.Parse(Console.ReadLine());
Console.WriteLine("结束页");
int n = int.Parse(Console.ReadLine());
for (int x = i; i < n; i )
{
string strURL = "https://bbs.xd.com/thread-" t "-" i "-1.html";
myHttpWebRequest = (HttpWebRequest)WebRequest.Create(strURL);
myHttpWebRequest.Timeout = 20 * 1000; //连接超时
myHttpWebRequest.Accept = "text / html,application / xhtml xml,application / xml; q = 0.9,*/*;q=0.8";
myHttpWebRequest.UserAgent = "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0;)";
//myHttpWebRequest.Headers.Add("Cookie", "UM_distinctid = 15b917f117652c - 0e0f802cc2344a8 - 13646e4a - 1fa400 - 15b917f117751c; CNZZDATA1254852923 = 818605592 - 1492791763 - http% 253A % 252F % 252Fsgk.fbisb.com % 252F % 7C1492850579");
//myHttpWebRequest.Host = "s.70sec.com";
//myHttpWebRequest.Referer = "http://s.70sec.com/";
HttpWebResponse myHttpWebResponse = (HttpWebResponse)myHttpWebRequest.GetResponse();
StreamReader myreader = new StreamReader(myHttpWebResponse.GetResponseStream(), Encoding.UTF8);
string responseText = myreader.ReadToEnd();
string[] lines = responseText.Split('\n');//new added
myHttpWebResponse.Close();
myreader.Close();
//提取部分
foreach (string line in lines)
// while ((line = sr.ReadLine()) != null)//修改处
{
int index = line.IndexOf("static/image/siteicon/v4/xd.png");
if (index > -1)
{
// Console.WriteLine(line);
Match mc = Regex.Match(line, @"(?<=nowrap;""> )(.*?)(?=<img class=""uc_platform_icon"" src=""static/image/siteicon/v4/xd.png)", RegexOptions.Multiline);
string href1 = mc.Groups[1].Value;
Console.WriteLine("{1}获取到内容{0}:", x,href1);
string href = href1 "\r\n";
StreamWriter sw = File.AppendText("1.txt");
sw.Write(href);
sw.Close();
}
}
}
}
}
}
好例子网口号:伸出你的我的手 — 分享!
小贴士
感谢您为本站写下的评论,您的评论对其它用户来说具有重要的参考价值,所以请认真填写。
- 类似“顶”、“沙发”之类没有营养的文字,对勤劳贡献的楼主来说是令人沮丧的反馈信息。
- 相信您也不想看到一排文字/表情墙,所以请不要反馈意义不大的重复字符,也请尽量不要纯表情的回复。
- 提问之前请再仔细看一遍楼主的说明,或许是您遗漏了。
- 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦,又没人会搭理,于人于己都无利。
关于好例子网
本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享,对搜索内容的合法性不具有预见性、识别性、控制性,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论平台是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定,若资源存在侵权或相关问题请联系本站客服人员,点此联系我们。关于更多版权及免责申明参见 版权及免责申明


网友评论
我要评论