精易论坛

标题: 多线程网页_访问_对象问题 [打印本页]

作者: adoue00 时间: 3 天前
标题: 多线程网页_访问_对象问题
在多线程网页_访问_对象里，我创建了16条线程去请求API，经常会返回空数据(没有任何数据返回)

作者: baitso 时间: 3 天前
单独每一个执行都通过的话，得考虑服务器是否做了限制，例如多少时间内限制多少次访问
试下在12，8，4，2这些线程数下，返回来的是否都正常

作者: frankiy 时间: 3 天前
服务器限制。你的多次请求（同IP、同设备号、同请求地址、间隔小）会被服务器认为是重复发包，判定无效请求，只会返回其中一个请求。

要想改变，那么针对以上判定去设计（改IP、增加间隔）

作者: 迷糊的弟弟 时间: 3 天前
正常正常，非常正常，当你并发更高的时候，用网页访问对象甚至还会出现整台电脑断网的情况，所以大并发的情况下，我都是使用go的httpclient

作者: RainCharm 时间: 3 天前
正确的多线程实现方案
方案1：每个线程独立创建对象
方案2：使用线程许可证控制并发
先测试单线程：确认API本身没有问题
逐步增加线程：从2个线程开始测试
监控资源：使用任务管理器查看CPU和内存使用
添加超时控制：避免线程无限等待
建议将线程数减少到4-8个，并添加重试机制，这样可以显著提高稳定性

你试一下这个方案

作者: qinping520 时间: 3 天前
1是请求太频繁，2是对方站点带有指纹检测，3是ssl双向认证

欢迎光临精易论坛 (https://bbs.ijingyi.com/)