分享 Flink1.7独有的时态表详解
pig2 2019-1-24 16:56
问题导读 1.什么是Flink时态表? 2.时态表有什么特点? 3.如何创建时态表? 4.时态表产生的原因是什么? 上一篇彻底明白Flink系统学习27:【Flink1.7】连续查询连接(时态表等) http://www.aboutyun.com/forum.php?mod=viewthreadtid=26650 时态表表示改变的历史记录表上的(参数化)视图的概念, ...
822 次阅读|0 个评论
分享 docker安装redis命令行进入
flrldabout 2019-1-24 16:42
runoob@runoob:~/redis$ docker exec -it 43f7a65ec7f8 redis-cli 127.0.0.1:6379 输入info查询信息的时候,可能会提示NOAUTH Authentication required错误,可能是因为redis设置了权限密码。 可以在命令行后面输入: auth"yourpassword" 验证密码.即可通过验证 127.0.0.1:6379auth 123456 ...
875 次阅读|0 个评论
分享 新人报道,各位大佬请多多指教!!!
x_p 2019-1-23 11:03
新人报道,各位大佬请多多指教!!!
675 次阅读|0 个评论
分享 hive报错native snappy library not available: this version of libhadoop was built .
Aningorg 2019-1-18 15:21
1.原因是snappy本地库不可用,在编译libhadoop的时候需要制定支持snappy,这一点不同于hadoop1.0,haodop1.0只需要将snappy本地库往指定目录copy就行了,不需要重新编译libhadoop本地库文件。 2.参考网上一些解决方案,重新编译native后会生成 libhadoop.so和 libsnappy.so.1, 编译主要是使用这两个文件。 ...
1231 次阅读|0 个评论
分享 hive sql性能优化
s060403072 2019-1-12 19:24
hive sql运行慢耗时很长时间该如何优化? 可以把小表放到内存,使用map join;可以把大表拆分为小表,分别取join
988 次阅读|0 个评论
分享 Flink执行流程分解
pig2 2019-1-11 21:29
Flink执行流程分解
Flink 的程序内在是并行和分布式的,数据流可以被分区成 stream partitions,operators 被划分为operator subtasks; 这些 subtasks 在不同的机器或容器中分不同的线程独立运行;operator subtasks 的数量在具体的 operator 就是并行计算数,程序不同的 operator 阶段可能有不同的并行数;如下图所示,source operator 的并 ...
690 次阅读|0 个评论
分享 通过代码实现kerberos 认证的 kafka
nettman 2019-1-10 21:03
由于不同的版本不一样,这里总结下相关内容 import org.apache.kafka.clients.CommonClientConfigs; import org.apache.kafka.clients.consumer.ConsumerRecord; import org.apache.kafka.clients.consumer.ConsumerRecords; import org.apache.kafka.clients.consumer.KafkaConsumer; import java.util.Colle ...
981 次阅读|0 个评论
分享 java.lang.IllegalStateException: AggregationGroup incomplete
JVM 2019-1-9 14:55
java.lang.IllegalStateException: AggregationGroup incomplete kylin创建cute失败 报异常: java.lang.IllegalStateException: AggregationGroup incomplete
1172 次阅读|0 个评论
分享 TooManyCuboidException: Aggregation group 1 of Cube Desc cubename_2 has too
JVM 2019-1-9 14:37
TooManyCuboidException: Aggregation group 1 of Cube Desc cubename_2 has too
创建cube失败,日志: Error Message org.apache.kylin.cube.model.TooManyCuboidException: Aggregation group 1 of Cube Desc cubename_2 has too many combinations: 65535. Use 'mandatory'/'hierarchy'/'joint' to optimize; or update 'kylin.cube.aggrgroup.max-combination' to a bigg ...
1514 次阅读|0 个评论
分享 java.lang.IllegalArgumentException: Too many rowkeys (143) in CubeDesc, please t
JVM 2019-1-9 14:24
java.lang.IllegalArgumentException: Too many rowkeys (143) in CubeDesc, please t
kylin创建cube失败,提示维度太多,,,143个表字段 143个维度 多吗?kylin对维度设置有上限吗? java.lang.IllegalArgumentException: Too many rowkeys (143) in CubeDesc, please try to reduce dimension number or adopt derived dimensions
984 次阅读|0 个评论
关闭

推荐上一条 /2 下一条