Foxtable(狐表) → 用户栏目 → 专家坐堂 → 关于爬网页资料的问题


  共有2969人关注过本帖树形打印复制链接

主题：关于爬网页资料的问题
帅哥哟，离线，有人找我吗？
ap9709130
 小大  1楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：六尾狐 帖子：1472 积分：11478 威望：0 精华：0 注册：2013/11/24 22:10:00 		关于爬网页资料的问题  发帖心情 Post By：2018/7/28 15:35:00 [只看该作者]

老师：

Dim body As String = "on=true&page=1&pageSize=15&productName=广州善恩化妆品有限公司&conditionType=3&applyname=&applysn="
Dim req = System.Net.WebRequest.Create("http://125.35.6.80:8080/ftba/itownet/fwAction.do?method=getBaNewInfoPage")
req.Method = "POST"
req.C
req.UserAgent = "Mozilla/5.0 (Windows NT 6.3; rv:57.0) Gecko/20100101 Firefox/57.0"
Dim aryBuf As Byte() = Encoding.UTF8.GetBytes(body)
req.ContentLength = aryBuf.Length
Dim writer = req.GetRequestStream()
writer.Write(aryBuf, 0, aryBuf.Length)
writer.Close()
writer.Dispose()
Dim pos = req.GetResponse
Dim stm As System.IO.Stream = pos.GetResponseStream()
Dim reader As New System.IO.StreamReader(stm)
Dim str As String = reader.ReadToEnd
pos.Close
stm.Close
reader.close
msgbox(str)
Dim jo As JObject = Jobject.Parse(str)
msgbox(jo.ToString)

用这种方法如何 能每次向服务器申请时，每次都用不同的IP 地址？
 回到顶部
帅哥哟，离线，有人找我吗？
有点蓝
 小大  2楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：超级版主 帖子：112380 积分：572162 威望：0 精华：9 注册：2015/6/24 9:21:00 		  发帖心情 Post By：2018/7/28 15:41:00 [只看该作者]

改变本机的IP？这个我也不会，自己网上搜搜吧，好像有些代理工具可以做到的

 回到顶部
帅哥哟，离线，有人找我吗？
ap9709130
 小大  3楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：六尾狐 帖子：1472 积分：11478 威望：0 精华：0 注册：2013/11/24 22:10:00 		  发帖心情 Post By：2018/7/28 16:11:00 [只看该作者]

老师

以我的水平，应该搞不定的。论坛上有相关的吗？
 回到顶部
帅哥哟，离线，有人找我吗？
飞飞
 小大  4楼 | QQ | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：三尾狐 帖子：622 积分：5147 威望：0 精华：1 注册：2014/8/7 6:56:00 		  发帖心情 Post By：2018/7/28 16:20:00 [只看该作者]

换IP是地球难题，几行代码搞不定

 回到顶部
帅哥哟，离线，有人找我吗？
有点蓝
 小大  5楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：超级版主 帖子：112380 积分：572162 威望：0 精华：9 注册：2015/6/24 9:21:00 		  发帖心情 Post By：2018/7/28 16:20:00 [只看该作者]

没见过。这种网上找个工具处理，不需要写代码的

 回到顶部
帅哥哟，离线，有人找我吗？
ap9709130
 小大  6楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：六尾狐 帖子：1472 积分：11478 威望：0 精华：0 注册：2013/11/24 22:10:00 		  发帖心情 Post By：2018/8/1 21:54:00 [只看该作者]

老师

用这种方法如何判断所返回的信息 不是空? 如果对方的服务器拒绝的话,返回的是什么内容?如何判断呢?多谢!
 回到顶部
帅哥哟，离线，有人找我吗？
有点甜
 小大  7楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：版主 帖子：85326 积分：427815 威望：0 精华：5 注册：2012/10/18 22:13:00 		  发帖心情 Post By：2018/8/1 22:20:00 [只看该作者]

以下是引用ap9709130在2018/8/1 21:54:00的发言：
老师

用这种方法如何判断所返回的信息 不是空? 如果对方的服务器拒绝的话,返回的是什么内容?如何判断呢?多谢!

 

直接判断str的值不就可以了？如果为空或者不规范的字符，就执行另外的代码。
 回到顶部
帅哥哟，离线，有人找我吗？
有点甜
 小大  8楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：版主 帖子：85326 积分：427815 威望：0 精华：5 注册：2012/10/18 22:13:00 		  发帖心情 Post By：2018/8/1 22:24:00 [只看该作者]


 回到顶部
帅哥哟，离线，有人找我吗？
ap9709130
 小大  9楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：六尾狐 帖子：1472 积分：11478 威望：0 精华：0 注册：2013/11/24 22:10:00 		  发帖心情 Post By：2018/8/2 11:52:00 [只看该作者]

甜老师

多谢您的资料，大概看一下。以我现在的水平应该是搞不定的。多谢！另外 关于判断 str 的值 ，我试过 用 str > "" 但是会报错的。
 回到顶部
帅哥哟，离线，有人找我吗？
有点甜
 小大  10楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级：版主 帖子：85326 积分：427815 威望：0 精华：5 注册：2012/10/18 22:13:00 		  发帖心情 Post By：2018/8/2 11:56:00 [只看该作者]

以下是引用ap9709130在2018/8/2 11:52:00的发言：
甜老师

多谢您的资料，大概看一下。以我现在的水平应该是搞不定的。多谢！另外 关于判断 str 的值 ，我试过 用 str > "" 但是会报错的。

 

1、报错报什么错？

 

2、加入try catch 能否捕捉错误？

 

3、ip的问题，你可以报错之后，断开路由的连接（路由器设置那里，断线，重新获取外网ip）
 回到顶部
总数 17 1 2 下一页
RSS2.0 | Xhtml无图版 | Xslt无图版 Copyright © 2000 - 2018 foxtable.com Tel: 4000-810-820 粤ICP备11091905号
   Powered By Dvbbs Version 8.3.0
页面执行时间 0.04297 秒, 4 次数据查询