大数据时代数据仓库技术的发展及应用

• 作者: 薛振文 李彤 牛帆 新华通讯社通信技术局
• 来源期刊: 中国传媒科技
• 学科: 工学
• 关键词: OLAP ETL 离线数仓 实时数仓 流批一体
• 年，卷（期）: 2024,（10）
• 所属期刊栏目: 传媒技术
• 页码范围: 154-158
• 页数: 5页
• 语种: 中文
• DOI: 10.19483/j.cnki.11-4653/n.2023.10.032

摘要

【目的】随着互联网和人工智能技术的发展，新闻行业也已进入大数据时代，充分利用好新闻产品制作以及传播中产生的数据对做出可靠的分析判断乃至决策有着重要的意义。【方法】数据仓库技术提供了这样的数据分析处理能力，本文介绍了数据仓库技术的发展现状和相关应用，特别是近几年出现的众多如Hive、Flink及Hudi这样新的技术框架，以及实时数仓和流批一体等新的技术理念。【结果】实现将数据仓库的最新技术和理念在新闻生产、传播以及考核评价等业务的应用实践。【结论】数据仓库技术在新闻行业的应用可以为我们的宣传工作提供更有力的数据决策支持。