首页
下载应用
提交文章
关于我们
问卷:你怎么看自由微信?
🔥 热搜 🔥
1
上海
2
习近平
3
新疆
4
鄂州父女瓜
5
乌鲁木齐
6
疫情
7
H工口小学生赛高
8
习明泽
9
芊川一笑图包
10
印尼排华
分类
社会
娱乐
国际
人权
科技
经济
其它
首页
下载应用
提交文章
关于我们
问卷:你怎么看自由微信?
🔥
热搜
🔥
1
上海
2
习近平
3
新疆
4
鄂州父女瓜
5
乌鲁木齐
6
疫情
7
H工口小学生赛高
8
习明泽
9
芊川一笑图包
10
印尼排华
分类
社会
娱乐
国际
人权
科技
经济
其它
一把短刀,怎么就让他连捅18人?!
向杨大市长道歉
向不容妄议的杨市长道歉
以色列搞大了:伊朗说要直接出兵参战
黄晓菁,这位杭州泰隆银行女员工自爆视频火了,带给我们那些思考?
生成图片,分享到微信朋友圈
查看原文
其他
Apache Spark在海致大数据平台中的优化实践
Original
翟士丹
大数据技术与架构
2021-10-21
收录于话题 #大数据成神之路
175个内容
大数据技术与架构
点击右侧关注,大数据开发领域最强公众号!
暴走大数据
点击右侧关注,暴走大数据!
本文来自由海致网络技术公司翟士丹分享。专注于大数据技术领域,Apache Spark Contributor,有丰富的Spark SQL引擎调优经验。
海致全称海致网络技术公司,成立于2013年7月。作为一家技术驱动的创业型公司,海致的创始班底拥有丰富的技术经验。核心团队成员来自百度、微软、IBM、EMC、硅谷等知名企业的资深互联网专家。
大数据数据平台的核心组成部分
多数据整合
自助式数据准备
可视化探索式分析
安全快捷的分发机制
覆盖全面的应用场景
产品架构如下:
平台的整体技术架构如下:
多数据整合,形成统一的数据口径:
灵活易用高性能的可视化探索式分析:
大数据平台的技术挑战与建设难点
数据同步:
OLAP任意多维分析引擎实现:
数据建模系统实现:
机器学习实现:
性能及稳定性优化:
大数据平台私有化部署及智能监控
欢迎点赞+收藏+转发朋友圈素质三连
文章不错?
点个【
在看
】吧!
👇
:
,
.
Video
Mini Program
Like
,轻点两下取消赞
Wow
,轻点两下取消在看
您可能也对以下帖子感兴趣
{{{title}}}
文章有问题?点此查看未经处理的缓存