强转为HttpRequestWrapper出错

[luchatex]

ERROR us.codecraft.webmagic.downloader.CustomRedirectStrategy(CustomRedirectStrategy.java:37) ## 强转为HttpRequestWrapper出错

Post请求发送json,返回经常出现这个问题.

[code4craft]

CustomRedirectStrategy可能有问题，能否给个出错的测试地址？

[luchatex]

使用代理的情况下,会出现强转失败,可能是因为 HttpRequestWrapper过时了吧.

[luchatex]

使用代理,遇到该ip失效,返回的是错误页面信息,强转request失败,造成该次请求丢失,没有添加到任务队列,报错, HttpRequestWrapper强转失败

07-02 13:47:21 DEBUG org.apache.http.impl.client.DefaultRedirectStrategy.getLocationURI(DefaultRedirectStrategy.java:142) - Redirect requested to location 'http://www.ivrn.net/warning/?n=20243&reason=3&s=16&id=11276903:8&ts=1498974427&str=BillingSet&referer=&cookie=&host=xxx.cn&url=/xxx/xxx&params='
07-02 13:47:21 ERROR us.codecraft.webmagic.downloader.CustomRedirectStrategy.getRedirect(CustomRedirectStrategy.java:37) - 强转为HttpRequestWrapper出错

上面网址我用xxx替换了

[luchatex]

Httpclient 4.5.2 已经使用final HttpRequest redirect = this.redirectStrategy.getRedirect(
currentRequest.getOriginal(), response, context);
不强转为 过时的 HttpRequestWrapper,建议修改下.

[luchatex]

HttpClient 中已有 方法 建议修正下.
final int status = response.getStatusLine().getStatusCode();
if (status == HttpStatus.SC_TEMPORARY_REDIRECT) {
return RequestBuilder.copy(request).setUri(uri).build();
} else {
return new HttpGet(uri);
}

[guwan]

一年多还没有修复吗？

[bojiangwin]

这个问题还存在，为啥还不修复呢

[eee27]

复制HttpClientDownloader,将其中的HttpClientGenerator同样复制修改,最后在新的Generator中同样复制修改一个RedirectStrategy,按照楼上的方法修改,暂时搞定了该问题