面向外汇市场监测的分布式计算框架设计

• 作者: 周虞 王志宏 程文亮 赵俊锋 过弋
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: 外汇市场 市场监测 Spark 有限无环图 资源分配
• 年，卷（期）: 2020,（1）
• 所属期刊栏目: 先进计算
• 页码范围: 173-180
• 页数: 8页
• 分类号: TP399
• 字数: 7435字
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2019061002

摘要

针对金融外汇市场监测指标计算复杂度高、完备性强、效率低等问题,基于Spark大数据架构提出了一种新的面向外汇市场监测的分布式计算框架.首先,对外汇市场监测的业务特性和现有技术框架进行了分析总结;然后,综合考虑了外汇单市场多指标和多市场多指标并行计算的业务特性;最后,基于Spark的有向无环图(DAG)作业调度机制和YARN的资源调度池隔离机制,分别提出了外汇市场级的有向无环图(M-DAG)模型和市场级资源分配策略——M-YARN.实验结果表明,所提面向外汇市场监测的分布式计算框架相对于传统技术框架在性能上提高了80％以上,可以有效保证大数据背景下外汇市场监测指标计算的完备性、精准性和时效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王志宏	华东理工大学信息科学与工程学院	6	1	1.0	1.0
2	程文亮	中汇信息技术(上海)有限公司开发二部	1	0	0.0	0.0
3	周虞	中汇信息技术(上海)有限公司开发二部	1	0	0.0	0.0
4	赵俊锋	中汇信息技术(上海)有限公司开发二部	1	0	0.0	0.0