日志
- 分享
kafka的advertised.host.name参数 外网访问配置
-
2017-4-14 09:15
-
kafka的server.properties文件 ```host.name```开始只绑定在了内部IP上，对外网卡无法访问。 把值设置为空的话会kafka监听端口在所有的网卡上绑定。但是在外网访问时，客户端又遇到了```java.nio.channels.ClosedChannelException```异常信息，server端用tcpdump分析的时候发现客户端有传递kafka所在机器的机器名 ...
-
4019 次阅读|0 个评论
- 分享
Cube和Kylin创建Cube的过程来聊一下Cube是什么
-
2017-1-9 17:43
-
简介 Kylin作为一个OLAP引擎，需要Cube模型支撑，在我们的工作过程中，在和用户以及相关的开发人员、测试、产品等介绍Kylin的过程中，他们总是会对Cube的模型有一些疑惑，作为经常接触这个概念的我来说这是再明了不过的了，而他们还是会在我讲解多次之后表示还在云里雾里，所以就希望通过一篇关于Cube和Kylin创建Cube ...
-
2222 次阅读|0 个评论
- 分享
Zookeeper异常Exception in thread "main" org.apache.zookeeper.KeeperExcep
-
2016-10-26 10:14
-
今天安装了CentOS虚拟机，然后写了一个Zookeeper测试程序，这个测试程序连接到运行在本机的Zookeeper服务能够正常运行。 但是当连接到远端的CentOS虚拟机上的Zookeeper服务之后，出现了下面异常： Exception in thread "main" org.apache.zookeeper.KeeperException$ConnectionLossException: KeeperErrorCode = Connect ...
-
2082 次阅读|0 个评论
- 分享
Kerberos ticket lifetime及其它
-
2016-8-19 15:24
-
前言 之前的博文中涉及到了Kerberos的内容，这里对Kerberos ticket lifetime相关的内容做一个补充。 ticket lifetime Kerberos ticket具有lifetime，超过此时间则ticket就会过期，需要重新申请或renew。ticket lifetime取决于以下5项设置中的最小值： Kerberos server上/var/kerberos/krb5kdc/kdc.conf中max_li ...
-
2767 次阅读|0 个评论
- 分享
java代码实例parquet.hadoop.parquetwriter
-
2016-8-12 18:08
-
例子1 public static void main(String args) throws IOException{ int fileNum = 10; //num of files constructed int fileRecordNum = 50; //record num of each file int rowKey = 0; &nb ...
-
3042 次阅读|1 个评论
热度 1
- 分享
hive2注意的地方
-
2016-6-30 18:35
-
hiveserver2 是在 hive2.0以后开始提供 webUI 界面。 远程访问hive 一定要启动 metastore 和 hiveserver2 分别以 hive --service hiveserver2 hive --service metasore 启动，然后可以用beeline测试。连10000端口。 摘自： http://www.aboutyun.com/forum ...
-
1286 次阅读|0 个评论
- 分享
openstack neutron(tap、qvb、qvo详解)
-
2015-12-31 21:30
-
openstack neutron Linux Host 侧使用的网络元素简介 Linux 主要使用以下三种设备模型：Bridge、TAP、VETH、VLAN。Bridge 设备是基于内核实现的二层数据交换设备，其作用类似于现实世界中的二级交换机。TAP 设备是一种工作在二层协议的点对点网络设备，每一个 TAP 设备都有一个对应的 Linux 字符设备 ...
-
1715 次阅读|0 个评论
- 分享
远程调试hadoop各组件
-
2015-12-22 18:05
-
远程调试对应用程序开发十分有用。例如，为不能托管开发平台的低端机器开发程序，或在专用的机器上（比如服务不能中断的 Web 服务器）调试程序。其他情况包括：运行在内存小或 CUP 性能低的设备上的 Java 应用程序（比如移动设备），或者开发人员想要将应用程序和开发环境分开，等等。 为了进行远程调试，必须使用 Jav ...
-
1276 次阅读|0 个评论
- 分享
理解flume hdfs sink round 和roll
-
2015-12-14 18:21
-
我们在配置flume hdfs sink 的时候注意这两个配置项，比如： collector1.sinks.sink_hdfs.hdfs.rollSize = 2048000000 collector1.sinks.sink_hdfs.hdfs.rollCount = 0 collector1.sinks.sink_hdfs.hdfs.rollInterval = 21600 collector1.sinks.sink_hdfs.hdfs.round = true collector1.sinks.sink ...
-
1585 次阅读|0 个评论
- 分享
一个spark receiver 或多个spark receiver 接收 多个flume agent
-
2015-12-14 18:11
-
利用一个spark receiver 接收多个flume agent String host = args ; int port = Integer.parseInt(args ); String host1 = args ; int port1 = Integer.parseInt(args ); InetSocketAddress address1 = new InetSocketAddress(host,port); InetSocketAddress address2 = n ...
-
1169 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
