基本信息来源于合作网站,原文需代理用户跳转至来源网站获取       
摘要:
传统的大数据内存分配算法存在运行速度慢、 分配不均匀的问题,为此,提出一种新的并行计算框架的内存优化算法.通过利用无监督贪婪模式逐层训练方法进行训练学习并建立并行框架,采用分布式存储的方法对数据进行承载,最大程度提升运算性能.同时,对较小内存Task做分化处理,保证算法的执行效率,并且会避免不必要的溢出操作.实验结果证明,相比于传统算法,所提算法的内存分配情况更合理、 运行速度快,内存分配效果更好.
推荐文章
基于分布/并行计算框架求解多学科设计优化问题
分布/并行策略
计算框架
多学科设计优化
Spark并行计算框架的内存优化
Spark
性能优化
堆内存
基于GPU-Hadoop的并行计算框架研究与实现
云计算
图形处理器
并行计算
Hadoop
海洋流场可视化
MapReduce
蒙特卡罗算法并行计算研究
蒙特卡罗算法
并行计算
计算效率
内容分析
关键词云
关键词热度
相关文献总数  
(/次)
(/年)
文献信息
篇名 并行计算框架的内存优化算法研究
来源期刊 信息技术 学科 工学
关键词 大数据 数据库管理系统 分布式独立内存 分配算法
年,卷(期) 2020,(8) 所属期刊栏目 应用技术
研究方向 页码范围 132-135,140
页数 5页 分类号 TP393
字数 3363字 语种 中文
DOI 10.13274/j.cnki.hdzj.2020.08.026
五维指标
作者信息
序号 姓名 单位 发文数 被引次数 H指数 G指数
1 杨帆 广东省中医院珠海医院信息科 9 7 2.0 2.0
2 高国静 清远市中医院信息科 1 0 0.0 0.0
3 张怡锋 广东省中医院珠海医院信息科 1 0 0.0 0.0
传播情况
(/次)
(/年)
引文网络
引文网络
二级参考文献  (79)
共引文献  (51)
参考文献  (10)
节点文献
引证文献  (0)
同被引文献  (0)
二级引证文献  (0)
1990(1)
  • 参考文献(0)
  • 二级参考文献(1)
2000(1)
  • 参考文献(0)
  • 二级参考文献(1)
2001(2)
  • 参考文献(0)
  • 二级参考文献(2)
2005(1)
  • 参考文献(0)
  • 二级参考文献(1)
2006(1)
  • 参考文献(0)
  • 二级参考文献(1)
2007(1)
  • 参考文献(0)
  • 二级参考文献(1)
2008(2)
  • 参考文献(0)
  • 二级参考文献(2)
2010(1)
  • 参考文献(0)
  • 二级参考文献(1)
2011(3)
  • 参考文献(0)
  • 二级参考文献(3)
2012(4)
  • 参考文献(0)
  • 二级参考文献(4)
2013(6)
  • 参考文献(0)
  • 二级参考文献(6)
2014(2)
  • 参考文献(0)
  • 二级参考文献(2)
2015(10)
  • 参考文献(1)
  • 二级参考文献(9)
2016(11)
  • 参考文献(1)
  • 二级参考文献(10)
2017(24)
  • 参考文献(1)
  • 二级参考文献(23)
2018(10)
  • 参考文献(2)
  • 二级参考文献(8)
2019(9)
  • 参考文献(5)
  • 二级参考文献(4)
2020(0)
  • 参考文献(0)
  • 二级参考文献(0)
  • 引证文献(0)
  • 二级引证文献(0)
研究主题发展历程
节点文献
大数据
数据库管理系统
分布式独立内存
分配算法
研究起点
研究来源
研究分支
研究去脉
引文网络交叉学科
相关学者/机构
期刊影响力
信息技术
月刊
1009-2552
23-1557/TN
大16开
哈尔滨市南岗区黄河路122号
14-36
1977
chi
出版文献量(篇)
11355
总下载数(次)
31
论文1v1指导