立即注册 登录
About云-梭伦科技 返回首页

bioger_hit的个人空间 https://www.aboutyun.com/?24 [收藏] [复制] [分享] [RSS]

日志

Spark streamming会有很多小文件，该如何解决

已有 1254 次阅读2018-12-27 08:41 |系统分类:Spark

Spark streamming会有很多小文件，该如何解决？
一般会通过存储到Hbase来解决，直接使用hdfs或则hive。可以使用SparkStreaming+kudu来存储数据。

路过
雷人
握手
鲜花
鸡蛋
收藏 分享邀请 举报

全部作者的其他最新日志

评论 (0 个评论)

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 立即注册

关闭

推荐上一条 /2 下一条

关于我们· 联系我们· 加入我们· 小黑屋· 合作伙伴   

Copyright © 2001-2024 About云-梭伦科技 Powered by Discuz! X3.4 Licensed Discuz Team.

简书 / Smrz 京ICP备2020039040号 Wxb 简书网举报电话：021-34700000