说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

ASP.NET如何用正则表达式得到网站页面中的所有链接

HTML文档下载 WORD文档下载 PDF文档下载
有时候我们需要遍历某个页面中的所有链接,甚至遍历整个网站,本文介绍了页面内容分解的方法。

 

有时候我们需要遍历某个页面中的所有链接,甚至遍历整个网站。我们用WebClient.DownloadString或HttpWebRequest得到某个网址的页面内容后,可以用正则表达式对内容进行分解。

具体请看代码:

 

public void ExtractURLs(string str){    // match.Groups["name"].Value - 链接名字    // match.Groups["url"].Value - 网址链接    string RegexPattern = @"<a.*?href=[""'](?<url>.*?)[""'].*?>(?<name>.*?)</a>";    // 正则匹配    System.Text.RegularExpressions.MatchCollection matches        = System.Text.RegularExpressions.Regex.Matches(str, RegexPattern, System.Text.RegularExpressions.RegexOptions.IgnoreCase);    foreach (System.Text.RegularExpressions.Match match in matches)    {        Response.Write(match.Groups["url"].Value);        Response.Write(match.Groups["name"].Value);    }}

在取得url后,我们可以再用WebClient.DownloadString获得内容,再分解、再进入,递归调用循环往复就可以遍历整个站点。

 

 

Delphi自定义消息应用一例 Delphi5中资源文件的创建和使用 Delphi的Bug-Tthread Suspend方法 Email服务器的简单实现-Delphi资料 Hook的制作-Delphi资料 INI文件的应用-Delphi资料 NT中的关闭计算机,重新登陆的实现-Delphi资料 Windows 系统方面-Delphi资料 Windows外壳扩展编程-Delphi资料 避免二次运行-Delphi资料 编程实现文件关联-Delphi资料 编写定制的文件流实现文件读写加密-Delphi资料 采用多线程进行数据采集-Delphi资料 产生临时文件名-Delphi资料 程序不出现在任务栏-Delphi资料 程序缩小为任务条右下角的小图标-Delphi资料 得到 Windows 用户名和序列号-Delphi资料 得到windows临时路径-Delphi资料 得到Windows用户名和序列号-Delphi资料 得到计算机的名字和ip-Delphi资料 得到内存的 Status-Delphi资料 得到上一个激活的组件-Delphi资料 得到在内存中运行的所有应用程序的handle-Delphi资料 调用控制面板项目大全-Delphi资料 动态改变当前显示模式-Delphi资料 动态改变屏幕分辨率-Delphi资料 动态建立不常用的对象-Delphi资料 对控制面板进行操作-Delphi资料 返回程序执行参数-Delphi资料 防止 Win95 显示严重错误-Delphi资料 改变操作系统日期-Delphi资料 .net目前是什么版本?在哪可以下载到新的安装盘?回答有效100分! 各位,一个重要的问题关于doc.send(false)问题(急!!) 请问:怎样编程来来虚拟网卡? WAP中如何读取手机号码?高分相送!马上给分! 有什么办法可以知道我的共享盘是什么时候创立的,并且知道人家访问过我的共享盘中的哪些文件 答题,大家帮我看看怎么让这个session的改变在页面上显示出来~~~~~~~~~~~~~~~~~~(开始写错了~~) 请教各位DX:关于iframe中显示图片的问题 xp的桌面问题 急!!注册数据库的问题 IBM软件清库存(大优惠) linux 9.0 安装后无法启动,请帮助 请问delphi怎么读取xml文件中的内容? IBM软件清库存(大优惠) 〉〉〉〉〉〉〉〉求一份对旧系统进行分析、整合、优化的文档 又是闪烁,头大! 简单问题,请紧急指导.(在线) help help : fortran + dll = ? 奇怪的现象:判断不了SQL sum()查询结果!!! 2003高考试题 设置访问表命令:“access-list 2 permit 10.0.0.0 0.0.0.255”中10.0.0.0 和 0.0.0.255分别指什么? 请问谁知道这是什么缘故啊? 如何计算cpu和memory的一般的使用上限 在delphi中使用什么报表控件打印的报表效果较好 谁知道db或dbf头文件的格式? 急急 NMFtp中我想从ftp服务器下载指定文件扩展名的文件,该怎么办? 初始化页面的时候,如何使TextMode="Password"的asp:textbox有默认值显示? IBM软件清库存(大优惠) 又是可恶的乱码问题 struts与数据库!在线等待! 如何开发asp.net程序(基于vb) vc++的链接错误 如何用程序动态的获得activex控件的方法属性事件信息 请教:使用web.xml做资源约束时如何由自己的程序来做用户验证 请问:怎样编程来来虚拟网卡? 急!创建LOOKUP的问题 如何计算cpu和memory的一般的使用上限 新问题请教! 老问题:从Excel文件里把数据导入导数据库中 有汇编玩的非常牛的人吗??? 字符串操作的简单问题 学习J2EE需要装什么软件? >>有关记录的问题??<< 请高手指教:出现“ORA12663:服务器未提供客户机要求的服务”问题,怎么解决? 大侠救我! 动态sql问题请教,谢谢 填充combobox的问题 windowsxp不能创建拨号连接 怎樣轉換時間格式 ACCESS问题 Linux下上网问题?在线等待!急!急!急! 终极讨论:从Excel文件里面导入数据 《童年》中精彩片段精彩片段中要有外祖父 最好有外祖父的性格特点外祖父要在这个精彩片段中,要有人物描写,人物性格特点有没有染坊失火这个片段还有娜塔莉亚舅母难产死了这个片段的 在下列句子中填入与“站立”相近的词语:1、如今,一座座海洋石油平台已()在海涛之中 2、月球上只能看到广袤的荒原上高山(),巨石嶙峋3、社会主义的中国象巨人一样()在世界的东 我心中的黄河,500字 纸上得来终觉浅,绝知此事要躬行是什么意思? 英文单词S开头的Forever S_____ You 都可以填什么?要所有的.最好是正面的词不要贬义词 Ils regardent les photos de Prerre的注音Ils regardent les photos de Prerre的注音 《纸上来得终觉浅,绝知此事要躬行》的意思 童年 的精彩片段400字的 法语直接宾语人称代词位置问题:Ils viennent souvent soir leurs parents.如果把父母用les替代,及否定按照简法上语法说:助动词(pouvoir devoir vouloir)+inf 或者最近将来时.那么像 venir+inf 来做某事、aime 纸上得来终觉浅,绝知此事要躬行的含义是什么? 童年第六章精彩片段 第二段中一闻一见一问,表现了作者对中仲永什么样的态度 “卫鞅”指的是 若x为任意实数时,二次三项式x²-6x+c的值都不小于0,则常数c满足的条件是 伤仲永第二段中一闻一见一问表现了作者对仲永怎样的态度 纸上得来终觉浅后一句 若x为任意实数时,二次三项式x^2-6x+c的值都不小于0,则常数c满足的条件是()A.c≥0 B.c≥9 C.c>0 D.c>9注意说为什么 方仲永中自为其名的为字什么意思 纸上得来终觉浅,下一句 若x为任意实数,二次三项式x²-6x+c得值都不小于0,则常数c满足的条件 111等于哪两个数相乘? 纸上得来终觉浅.下一句是? 若x为任意实数时,二次三项式x的平方-6x+c的值都不小于0,则常数c的取值范围是什么? 一个数 111相乘一个数与111相乘 怎么巧算 纸上得来终觉浅的下一句? 若x为任何实数,二次三项式x²-6x+c的值都不小于0,则常数c满足的条件是( )若x为任何实数,二次三项式x²-6x+c的值都不小于0,则常数c满足的条件是( ) A.c≧0 B.c≧9 C.>0 D.>9 现在流行的PK用英语怎么说? 纸上得来终觉浅下一句是什么? 以S开头的 单词例如:SHORT 必须4各字母以上的 爱莲说一文写到菊花和牡丹有什么作用 英语翻译我是在销售进口葡萄酒的,最近在一款法国葡萄酒瓶上看到d'après Yslaire Victor Hugo 我知道是雨果,但是这样接起来又是什么意思呢?Victor Hugo d'après Yslaire Last night,a fire broke out in Ann's house in Manchester.Ann's 21 were out of town for the weekend when something wrong in the room caused the fire to start in the middle of the night.The 22 was waken up by the family dog,Danny,who was barking loudly 大器之才的器是什么意思 "纸上得来终觉浅,绝知此事要躬行"的意思纸上得来终觉浅,绝知此事要躬行问渠哪得清如许,为有源头活水来.世事洞明皆学问,人情练达即文章.千淘万漉虽辛苦,吹尽狂沙始到金.落红不是无情物 对于二次三项式X2-10X+36,小颖同学做出如下结论:无论X取什么实数,它的值一定大于零.你是否同意她的说你是否同意她的说法?说明你的理由.并求出它的最小值 “大器之才”是什么意思 有一道法语题目,是用tout,toute,tous,toutes改写句子,但有个句子,意思都看不明白,就不知道怎么改了Est-ce que vos amis sont venus? 对于二次三项式x平方-10x 36,小颖作出以下结论:无论x取什么实数它的值一定大于零 求一句英文翻译:(对于保险的要求,你是否可以用英语写在一张纸上给我...)翻译句子:47. 对于保险的要求,你是否可以用英语写在一张纸上给我,因为我口语不是很好,可能无法很好的向保 滑轮比赛的分类,及中国的滑轮运动员介绍,还有自由式轮滑穿的鞋是什么样的? 对于二次三项式x²-10x+36,小米同学作出以下结论:无论x取什么实数,它的值一定大于零.你是否同意说 如图K1-3-7.求图中阴影部分绕AB旋转一周所形成的几何体的表面积和体积 求教一道法语题 Avant nous, aucun etranger ne s'etait aventure dans ce coin. 这句话什么意思啊Avant nous, aucun etranger ne s'etait aventure dans ce coin.A Personne n'etait jamais venu ici avant nousB Un seul etranger etait venu dans le Run With You 歌词 介绍《王尔德童话》的400字. 1.在图10所示的装置中,A、B是动滑轮,C是定滑轮,D是轮轴,D的轮半径R=10厘米,轴半径r=5厘米,物重G=500牛顿,每个动滑轮重P=50牛顿.如果不计绳重和摩擦,各段绳的方向保持相平行,那么:(1)为把重物 advice advise suggestion区别是什么?最后三十块了. X2-6X+8=0 用公式法或分解因式法解, 修改病句(用修改符号在原句上修改) 1 当奥运圣火在中国大地传递时,让我们看到了无数感人的场面.2 在学校春游筹备会上,各相关部门交换了广泛的意见.3 家长不能过分溺爱自己的孩子,这 suggest 和suggestion 的区别. 求黄河的文章,要500字到530字之间 当奥运圣火在杭州传递时,让我们看到了无数感人的画面修改病句 We will fly a kite as soon as your homework__A.finishes B.will be finished C.has finished D.is finished 分解因式 x2-6x+8 '学雷锋活动在中华大地实施'这句的病句修改 We will fly a kite as soon as your homework ____ A.finished B.will be finished C.has finished ...We will fly a kite as soon as your homework ____A.finished B.will be finished C.has finished D.is finished 运用生活与哲学相关知识,阐述京津冀三地发展为什么 a bag of wind 用滑轮提物体用滑轮组提升物体,当绳子自由端被拉下2米时,物体升高了0.5米,被提升物体的质量是20kg.若不计动滑轮重力和摩擦阻力,则拉绳子的力应为多少牛? 英文字母表中那个字母总在向人提问;英文字母表中那个字母能解渴. 阿盟秘书长称支持卜拉希米就叙问题斡旋日本一司机醉酒驾车连撞5名女中学生后英国三百余名议员被指仍挪公款用于日常韩国总统朴槿惠巴黎会见联合国教科文组加拿大10岁男童发现超新星 为全球最中央印发通知要求开展“四风”突出问题存在环境违法 北京35家餐饮企业和单河南警方异地用警突查涉黄会所 搜出大南京富二代杀妻案开审 被告人称自首否澳12岁少年成商界奇才 开养鸡场月赚阿富汗总统批美击毙巴基斯坦塔利班头目想坐飞机逃生门附近座位?德航新规定要印尼组织攻击澳大利亚百家网站 抗议澳湖南永兴庭审致7死煤矿瓦斯事故案 1金冠网店20万元起步 揭开网店\"黑老师在大厦里办起\"培优班\" 课堂吉星鹏杀妻案开审 被告人称自首否认故伊朗称希望与“六方”就核计划开展严肃全球多地共赏日食奇观 罕见金边全环食埃及今天审判前总统穆尔西 数千支持者韩国航空国防展开幕 特种兵徒手斩酒瓶公安部紧急预警:这样的流量千万别领!好猛!大爷大妈为了儿子,活活骂哭女司为什么范冰冰的男人这么厉害!开个店秒这些车语必须懂,关键时刻能救你一命~奥迪女挑衅丰田男 场面无法想象!警察搞笑到没朋友!印度兄弟就是这么的不能“乡愁”,在美景中蔓延回头率100%的汽车 女人开了会脸红郑州市召开全市新型城镇化建设暨城市工绝对不比日货差!支持国货,从我做起~战绩看走势 伤停战意可参考油耗高?没事,几个小技能学会,马上就100%“中枪”!这些骗局已渗透进你12306开售春运火车票 手机管家:11月27日现货投资提前休市,如何布苏州异地贷款可开住房公积金缴存使用证58月付是什么意思Misfit联手珠宝品牌做智能穿戴 高考志愿填报——Are You Re云天爵:长期投资股市值不值?全球旅游胜地来蓉“招亲”成都国际旅展
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘