博客
关于我
使用curl控制下载速度
阅读量:685 次
发布时间:2019-03-17

本文共 1574 字,大约阅读时间需要 5 分钟。

1. 速度控制

1.1 php代码方式

function http_request($URI){           $ch = curl_init();    curl_setopt($ch, CURLOPT_URL, $URI);    curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);        //速度控制    $speed = 100000;    curl_setopt($ch, CURLOPT_MAX_RECV_SPEED_LARGE, 100000);    $result = curl_exec($ch);    if (!$result){           echo curl_error($ch);        return false;    }        curl_close($ch);    return $result;}$url = "http://toutiao.sogoucdn.com/ykvideo/20181130/0575139af28f38c336912739acf33a88.mp4";$res = http_request($url);file_put_contents("./video", $res);

说明:

  1. CURLOPT_MAX_RECV_SPEED_LARGE,即是控制下载速度的参数,数值单位为byte。上例中,我们期望的速度为100k(byte)。
  2. 网速其实指的是bit, 所以100k byte对应的网速是800k bit。 需要注意下这里的换算关系。

1.2 命令行方式

curl "http://toutiao.sogoucdn.com/ykvideo/20181130/0575139af28f38c336912739acf33a88.mp4" -o video --limit-rate 100k

说明:

  1. –limit-rate就是命令行curl控制速度的参数。
  2. 速度单位仍然是byte。

2. 速度测定

我们使用iftop对网卡的下载速度进行测定,以观测控速是否起到了应有的效果。不了解iftop的同学,可以点击。

2.1 php方式

运行1.1中的代码,我们在iftop中看到如下记录:

10.144.73.171 => 111.202.99.142                         6.56Kb  6.78Kb  6.76Kb              <=                                        1.02Mb  1.00Mb  0.99Mb

平均下载速度在900kb~1.1M(bit)之间波动。

2.2 shell方式

iftop中看到记录如下:

10.144.73.171 => 111.202.99.191                         6.72Kb  6.59Kb  6.81Kb              <=                                        1.04Mb  1.04Mb  1.04Mb

平均下载速度在850kb~1.1M(bits)之间波动。与代码方式基本一致。

3.3 结论

  1. 使用命令行curl ,和php curl均可对下载速度进行控制。
  2. 速度的控制并不能做到很精确,只能保证下载平均速度在预期值附近。实测中发现,个别时点可能会突破预期值很多。
  3. 设定的速率越低,速度波动会越大。比如限定速度为1k bit, 实际观察到的速度波动会在320b~50kb之间。显然波动高于上例中限定速率为800k bit的情况。
  4. 不同工具使用的单位不同, 注意byte与bit的转换。

转载地址:http://giwhz.baihongyu.com/

你可能感兴趣的文章
NIFI分页获取Postgresql数据到Hbase中_实际操作---大数据之Nifi工作笔记0049
查看>>
NIFI同步MySql数据_到SqlServer_错误_驱动程序无法通过使用安全套接字层(SSL)加密与SQL Server_Navicat连接SqlServer---大数据之Nifi工作笔记0047
查看>>
NIFI同步MySql数据源数据_到原始库hbase_同时对数据进行实时分析处理_同步到清洗库_实际操作06---大数据之Nifi工作笔记0046
查看>>
Nifi同步过程中报错create_time字段找不到_实际目标表和源表中没有这个字段---大数据之Nifi工作笔记0066
查看>>
【Flink】Flink 1.9 版本 web UI 突然没有日志
查看>>
NIFI大数据进阶_FlowFile拓扑_对FlowFile内容和属性的修改删除添加_介绍和描述_以及实际操作---大数据之Nifi工作笔记0023
查看>>
NIFI大数据进阶_FlowFile生成器_GenerateFlowFile处理器_ReplaceText处理器_处理器介绍_处理过程说明---大数据之Nifi工作笔记0019
查看>>
NIFI大数据进阶_FlowFile生成器_GenerateFlowFile处理器_ReplaceText处理器_实际操作---大数据之Nifi工作笔记0020
查看>>
NIFI大数据进阶_Json内容转换为Hive支持的文本格式_实际操作_02---大数据之Nifi工作笔记0032
查看>>
NIFI大数据进阶_Json内容转换为Hive支持的文本格式_操作方法说明_01_EvaluteJsonPath处理器---大数据之Nifi工作笔记0031
查看>>
NIFI大数据进阶_Kafka使用相关说明_实际操作Kafka消费者处理器_来消费kafka数据---大数据之Nifi工作笔记0037
查看>>
NIFI大数据进阶_Kafka使用相关说明_实际操作Kafka生产者---大数据之Nifi工作笔记0036
查看>>
NIFI大数据进阶_NIFI的模板和组的使用-介绍和实际操作_创建组_嵌套组_模板创建下载_导入---大数据之Nifi工作笔记0022
查看>>
NIFI大数据进阶_NIFI监控功能实际操作_Summary查看系统和处理器运行情况_viewDataProvenance查看_---大数据之Nifi工作笔记0026
查看>>
NIFI大数据进阶_NIFI监控的强大功能介绍_处理器面板_进程组面板_summary监控_data_provenance事件源---大数据之Nifi工作笔记0025
查看>>
NIFI大数据进阶_NIFI集群知识点_认识NIFI集群以及集群的组成部分---大数据之Nifi工作笔记0014
查看>>
NIFI大数据进阶_NIFI集群知识点_集群的断开_重连_退役_卸载_总结---大数据之Nifi工作笔记0018
查看>>
NIFI大数据进阶_使用NIFI表达式语言_来获取自定义属性中的数据_NIFI表达式使用体验---大数据之Nifi工作笔记0024
查看>>
NIFI大数据进阶_内嵌ZK模式集群1_搭建过程说明---大数据之Nifi工作笔记0015
查看>>
NIFI大数据进阶_内嵌ZK模式集群2_实际操作搭建NIFI内嵌模式集群---大数据之Nifi工作笔记0016
查看>>