黄晓成
- 作品数：7 被引量：1H指数：1
- 供职机构：浙江大学更多>>
- 发文基金：浙江省杰出青年科学基金国家自然科学基金国家高技术研究发展计划更多>>
- 相关领域：自动化与计算机技术更多>>
- 一种通过压缩提高简易再生码存储效率的方法和系统
- 本发明适用于数据处理领域，提供了一种通过压缩提高简易再生编码存储效率的方法和系统，所述方法包括：获取待压缩文件，并根据所述待压缩文件的大小与预设的文件大小阀值和数据块大小的关系对所述待压缩文件进行处理；根据所述待压缩文件...
- 尹建伟黄晓成邓水光李莹吴健吴朝晖
- 文献传递
- 视频云存储服务场景下的HDFS负载均衡工具
- 2017年
- 在线视频服务是互联网服务的重要内容,存储是在线视频服务提供的基础.HDFS作为面向通用文件的云存储系统,被很多视频服务网站采用,但其负载均衡工具没有考虑利用视频文件在线播放时的带宽消耗特性使集群的带宽资源得到更充分的利用.为解决这一问题,提出视频存储场景下的负载均衡方法 VOBM,它对视频文件在线播放时的带宽消耗与视频文件的码率、数据块大小和访问热度的关系进行了分析并建立了新的负载评估模型,在此基础上它在负载方案生成和负载调度两个环节中加入了对带宽消耗因素的考虑.在HDFS原有负载均衡工具的基础上实现了该方法,实验证明该方法能够有效避免高带宽消耗数据块的聚集,在高带宽消耗视频文件作为服务访问热点的实验场景中,该方法在90%的场景中优于原有负载均衡方法,最高能使数据节点集群中瓶颈节点的带宽峰值降低20%.
- 黄晓成尹建伟
- 关键词：负载均衡HDFS带宽
- 面向视频云存储的HDFS负载均衡工具设计与实现
- 在线视频服务是互联网服务的重要组成部分，存储是提供在线视频服务的基础。HDFS（Hadoop Distributed File System）作为面向通用文件存储的云存储系统，被很多视频服务网站使用，但其负载均衡工具未考...
- 黄晓成
- 文献传递
- 一种HDFS中面向视频的负载均衡方法
- 本发明公开了一种HDFS中面向视频的负载均衡方法，其结合视频文件的码率属性建立了视频存储场景下HDFS中数据节点资源利用率的评价模型；数据收集器分为名字节点代理和数据节点代理两部分，用于在HDFS中维护视频文件额外的属性...
- 尹建伟黄晓成邓水光李莹吴健吴朝晖
- 文献传递
- 一种通过压缩提高简易再生码存储效率的方法和系统
- 本发明适用于数据处理领域，提供了一种通过压缩提高简易再生编码存储效率的方法和系统，所述方法包括：获取待压缩文件，并根据所述待压缩文件的大小与预设的文件大小阀值和数据块大小的关系对所述待压缩文件进行处理；根据所述待压缩文件...
- 尹建伟黄晓成邓水光李莹吴健吴朝晖
- 视频云存储服务场景下的HDFS负载均衡工具
- 在线视频服务是互联网服务的重要内容,存储是在线视频服务提供的基础.HDFS作为面向通用文件的云存储系统,被很多视频服务网站采用,但其负载均衡工具没有考虑利用视频文件在线播放时的带宽消耗特性使集群的带宽资源得到更充分的利用...
- 黄晓成尹建伟
- 关键词：HADOOP分布式文件系统带宽资源负载均衡
- 文献传递
- 一种HDFS中面向视频的负载均衡方法
- 本发明公开了一种HDFS中面向视频的负载均衡方法，其结合视频文件的码率属性建立了视频存储场景下HDFS中数据节点资源利用率的评价模型；数据收集器分为名字节点代理和数据节点代理两部分，用于在HDFS中维护视频文件额外的属性...
- 尹建伟黄晓成邓水光李莹吴健吴朝晖
- 文献传递
