日志
- 分享
作业运行的时候显示0记录 0write的原因
-
2019-4-3 08:40
-
这个是正常的，不是0条，每个线程在进行shuffle 的时候这个就是0，等完了之后就会显示有多少记录，有个等待过程。
-
787 次阅读|0 个评论
- 分享
Python连接到HiveServer2（KERBEROS和非KERBEROS）
-
2019-1-2 21:31
-
代码样例 import pyhs2 # PLAIN with pyhs2.connect(host='n5.cluster', port=10000, authMechanism="PLAIN", ...
-
1506 次阅读|0 个评论
- 分享
HDFS 2.x 磁盘间数据均衡如何实现
-
2019-1-2 18:33
-
一、背景 当HDFS的datanode节点挂载多个磁盘时，往往会出现两种数据不均衡的情况： （1） 不同datanode节点间数据不均衡； （2） 挂载数据盘的磁盘间数据不均衡。 特别是这种情况：当datanode原来是挂载单数据磁盘，当磁盘占用率很高之后，再挂载新的数据盘。由于hadoop 2.x 版本并不支持 HDFS 的磁盘间数据 ...
-
2410 次阅读|0 个评论
- 分享
Kakfa知识总结
-
2018-11-27 17:28
-
内容来自about云VIP群 1、kafka是什么 类JMS消息队列，结合JMS中的两种模式，可以有多个消费者主动拉取数据，在JMS中只有点对点模式才有消费者主动拉取数据。 kafka是一个生产-消费模型。 Producer：生产者，只负责数据生产，生产者的代码可以集成到任务系统中。 数据的分发策略由prod ...
-
1264 次阅读|0 个评论
- 分享
如何在Linux中创建永久网桥
-
2016-12-27 14:14
-
来自： linux bridge 在centos上用brctl添加的网桥，重启后没有了。 http://www.aboutyun.com/forum.php?mod=viewthreadtid=20667 1、建立网桥 touch /etc/sysconfig/network-scripts/ifcfg-br0 建立网桥配置文件ifcfg-br0 vi /etc/sysconfig/network-scripts/ifcfg-br0 2、添加网卡到网桥 把eth0和et ...
-
1266 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
