有一个有效的方法来测试大量的http url的有效性在Matlab ?

2视图(30天)

显示旧的评论

雷李 2015年8月25日

0
链接

这个问题直接联系

//www.tianjin-qmedu.com/matlabcentral/answers/236030-is-there-an-efficient-way-to-test-the-validity-of-a-large-set-of-http-urls-in-matlab

评论道: 雷李 2015年8月25日

如果使用urlread / webread,下载所有的内容,这是耗时的和不必要的。

如果一个http URL不存在(204/404没有内容/错误),函数是困一些秒。

有其他更快的方法?

0评论
显示1年长的评论藏1年长的评论

登录置评。

在回答这个问题。

答案(1)

沃尔特·罗伯森 2015年8月25日

1
链接

直接链接到这个答案

//www.tianjin-qmedu.com/matlabcentral/answers/236030-is-there-an-efficient-way-to-test-the-validity-of-a-large-set-of-http-urls-in-matlab answer_190270

http://www.w3.org/Protocols/rfc2616/rfc2616-sec9.html sec9.4 HTTP头方法

如果你不能找到一种方法与urlread()可以使用 urlread2 () 通过“头”的方法。

4评论
显示3年长的评论隐藏3年长的评论

雷李 2015年8月25日

你也一样,不存在的url

[a, b] = urlread2 (“http://www.qwert.yui”,“头”)

产生错误

                                  响应流是未定义的
                                 
                                  下面错误是一个Java转储(截断):
                                 
                                  错误使用urlread2(第217行)
                                 
                                  Java异常发生:
                                 
                                  . io .IOException:服务器返回URL的HTTP响应代码:503:
                                 
                                  http://www.qwert.yui
                                 
                                  在sun.net.www.protocol.http.HttpURLConnection.getInputStream(未知来源)

但是url返回204年或404年没有内容

                                  url =“http://ws.resif.fr/fdsnws/dataselect/1/query?network=SX&station=FBE&starttime=2000-01-01&endtime=2000-01-02&channel=BHZ”
                                 
                                  [a, b] = urlread2 (url,“头”)

生产

                                  一个=
                                 
                                  空字符串:1-by-0
                                 
                                  b =
                                 
                                  allHeaders (1 x1结构):
                                 
                                  firstHeaders (1 x1结构):
                                 
                                  状态(1 x1结构):
                                 
                                  url:“http://ws.resif.fr/fdsnws/dataselect/1/query?netw..”。
                                 
                                  好:1

和b.firstHeaders

                                  回应:“HTTP / 1.1 200 OK”
                                 
                                  日期:星期二,2015年8月25日格林尼治时间17:17:41”
                                 
                                  服务器:“Apache-Coyote / 1.1”
                                 
                                  Content_Type:“文本/平原;charset = utf - 8 '
                                 
                                  X_Cache:“从www-cache-3小姐”
                                 
                                  通过:' 1.1 www-cache-3(鱿鱼/ 3.4.12)'
                                 
                                  连接:“维生”

雷李 2015年8月25日

wget这个url返回

                                  ……,awaiting response... 204 No Content
                                 
                                  长度:0 (text /普通)

登录置评。

在回答这个问题。

类别

MATLAB 外部语言接口 Web服务与MATLAB 使用HTTP与MATLAB

找到更多的在使用HTTP与MATLAB在帮助中心和文件交换

社区寻宝

找到宝藏在MATLAB中央,发现社区如何帮助你!

开始狩猎!

有一个有效的方法来测试大量的http url的有效性在Matlab ?

0评论
显示1年长的评论藏1年长的评论

答案(1)

4评论
显示3年长的评论隐藏3年长的评论

另请参阅

类别

标签

社区寻宝

有一个有效的方法来测试大量的http url的有效性在Matlab ?

0评论 显示1年长的评论藏1年长的评论

答案(1)

4评论 显示3年长的评论隐藏3年长的评论

另请参阅

类别

标签

社区寻宝

0评论
显示1年长的评论藏1年长的评论

4评论
显示3年长的评论隐藏3年长的评论