最近在做“信息采集”,简单说就是:远程post一个地址,然后获得返回的html,再使用正则过滤出你想要的信息。
但是对于象.net中GridView自带的分页没有任何类似page=2的参数,该如何post,以获得某页的html?
如下面这个地址:
http://61.240.36.105/colorring/ringshop.jsp
你如何点那个分页按钮,上面的地址始终不变,他到底post那些参数到服务器,然后再返回具体页的数据?凭空猜想和查看他的html源码都很困难得到。
下面咱们的利器就横空出世:HttpWatch
下载地址:http://download.zol.com.cn/detail/16/156174.shtml
先看介绍:
强大的网页数据分析工具。集成在Internet Explorer浏览器中。只需要选择相应的网站,软件就可以对网站与IE之间的需求回复的通讯情况进行分析并在同一界面显示其相应日志记录。每一个HTTP记录都可以详细的分析其 Cookies、消息头、字符查询等信息。支持HTTPS及分析报告输出为XML、CSV等格式。
(使用方法在下载包里有,非常简单哦)
下面就开始获得http://61.240.36.105/colorring/ringshop.jsp的分页post到服务器的具体参数:
具体参数如图:
这下参数就全赤裸裸的出来啦,现在你只需post这个地址就可以:
stringappendStr=@"http://61.240.36.105/colorring/ringshop.jsp?$FORMNAME=colorring_ringlist&$parameters=colorring_ringlist!"+num+"!225!20!4489!"+((num-1)*20)+"!"+(((num-1)*20)+20);
其中这个num是个页数。
以下是登录cnblogs的时候具体post到服务器的参数:(图不是很清晰,凑活看吧,现在美女也不多阿)
这个只是个开头,如果有的网站需要登录和验证码,你还得花心思,今天就到这啦。。。
分享到:
相关推荐
HttpWatch9.3--抓包 HttpWatch9.3--抓包 HttpWatch9.3--抓包
HttpWatch HttpWatch_Professional HttpWatch专业版 HttpWatch_Pro8.X HttpWatch-Professional-8.0.8-incl-Key 注:仅供学习交流,请在24小时内删除。
HttpWatch-v10.0.40
可以对于网站进行监控,查看web处理的相关效率!
集成在Internet Explorer工具栏、包括网页摘要、Cookies管理、缓存管理、消息头发送/接受、字符查询、POST 数据和目录管理功能、报告输出。HttpWatch 是一款能够收集并显示深层信息的软件。它不用代理服务器或一些...
HttpWatch is an HTTP sniffer for IE, Firefox, iPhone & iPad that provides new insights into how your website loads and performs.
网络工具-网管软件-HttpWatch Pro免费下载.zip
HttpWatch 真正的专业完全版8.0.8 附带key, IE8-9 和FF10测试可用
httpWatch-监视web流的好工具-IE插件
HttpWatch,get请求,post请求,抓包工具,很好用
HttpWatch –网页读取速度诊断工具,支持IE、Firefox浏览器,部落客常常加装很多外挂在自己的部落格上,因为这些外挂大多属于「外部连结」,一旦部落格读取速度卡住时(又确定不是BSP的问题),就很难去判断是哪些...
字符查询.POST 数据和目录管理功能.报告输出.HttpWatch 是一款能够收集并显示页页深层信息的软件。它不用代理服务器或一些复杂的网络监控工具,就能够在显示网页同时显示网页请求和回应的日志信息。甚至可以显示...
HttpWatch强大的网页数据分析工具。集成在Internet Explorer工具栏。 ... HttpWatch工具简介及使用技巧. 发
httpwatch,网页抓包工具,用于http数据包分析,post网页信息时需要用到
HttpWatch是功能强大的网页数据分析工具,集成在IE工具栏,主要功能有网页摘要、cookies管理、缓存管理、消息头发送/接收,字符查询、POST数据、目录管理功能和报告输出。HttpWatch是一款能够收集并显示深层信息的...
httpwatch-网页监视工具
IE http监控利器HttpWatch ,强大的作用不用多说,试试会让你意想不到。而且该版本是汉化版。
用于监控web与服务器间数据间的传递、以及缓存数据、发生的错误信息等
HttpWatch是一款强大的网页数据分析工具.集成在Internet Explorer工具栏.包括网页摘要.Cookies管理.缓存管理.消息头发送/接受.字符查询.POST 数据和目录管理功能.报告输出
HttpWatch-5.2 用于查看网页的执行情况,用于跟踪页面的执行状态