Kafka如何优化JVM GC 2019-07-29

1、Kafka的客户端缓冲机制 首先，先得给大家明确一个事情，那就是在客户端发送消息给kafka服务器的时候，一定是有一个内存缓冲机制的。 也就是说，消息会 ...

(795)次阅读|(0)个评论

Flink因为jdk版本造成的错误 2019-07-04

caused by java.lang.illegalstateexception:buffer pool is destoryed 我们从网上下载源码，但是不能运行，出现上面错误，是因为jdk的小版本造成的。 比如你使 ...

(840)次阅读|(0)个评论

Spark sql写法的重要性 2019-06-28

下面写法： select * from where set=0 limit 500 union select * from t b where b.sex=1 limit 5000 产生错误： mismatched input union expection eof ...

(551)次阅读|(0)个评论

构建适配Oozie调度的shell任务 2019-05-20

Directory Oozie在日常任务调度过程中，可以发起shell action，符合预期的情况是，当oozie调度的脚本执行失败，后续队列的任务也应该失败或者暂停。 但是 ...

(623)次阅读|(0)个评论

k8s常用命令集合 2019-05-19

查看集群信息： # kubectl cluster-info 查看更详细的可以用 kubectl cluster-info dump 查看各组件状态 # kubectl -s http://localhost:8080 get ...

(1516)次阅读|(0)个评论

hbase按行分region，再按列族分store，为什么store内有若干HFile，为啥不存成1个HFile 2019-04-25

微信群讨论经典记录： hbase按行分region，再按列族分store，为什么store内有若干HFile，为啥不存成1个HFile hbase的写操作：首先写入到表中region的columnf ...

(698)次阅读|(0)个评论

查看更多