搜索
搜 索
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
办公|编程助手
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
›
日志
发布
日志
上传
相册
添加
分享
记录
日志
好友的日志
我的日志
随便看看
发表新日志
分享
hive下UDF函数的使用
langke93
2015-3-6 15:40
1、编写函数 package com.example.hive.udf; import org.apache.hadoop.hive.ql.exec.UDF; import org.apache.hadoop.io.Text; public final class LowerCase extends UDF { public Text evaluate(final Text s) { &nb ...
1324 次阅读
|
0
个评论
分享
Hadoop简单API的web应用开发
langke93
2015-1-22 22:01
最近写了个web程序来调用hadoop的api,对hadoop自带的管理方式进行了二次开发,加强了可操作性。现在简单的介绍下功能和方法。 hadoop版本为1.xx 文件查看功能 先来个页面截图 这个功能实现主要是利用了Hadoop的FileSystem类得到HDFS文件的对象,并利用此提供的方法对HDFS进行操作。其中文件类型的判断用到 ...
489 次阅读
|
1
个评论
热度
1
分享
Hadoop 2.x中fsimage和edits合并源码分析及配置等说明
langke93
2015-1-5 11:44
为了让Standby NN的状态和Active NN保持同步,即元数据保持一致,它们都将会和JournalNodes守护进程通信。当Active NN执行任何有关命名空间的修改,它需要持久化到一半以上的JournalNodes上(通过edits log持久化存储),而Standby NN负责观察edits log的变化,它能够读取从JNs中读取edits信息,并更新其内部的命名空间。一 ...
1212 次阅读
|
1
个评论
热度
1
分享
kafka0.8.1.1彻底删除topic并清空log内容
langke93
2014-12-31 01:45
kafka0.8.1.1以及之前版本都无法使用类似一条命令就彻底删除topic,以前看过网上一些删除命令不过只是在zookeeper注销信息而已,但是实际的日志内容还是保存在kafka log中,因为个人需要所以慢慢琢磨了方法彻底清除topic(ps:kafka0.8.2好像直接支持直接删除,不过现在还是beta版 )。 本人机器环境如下: Kafka目录:/u ...
16883 次阅读
|
0
个评论
1
2
3
4
/ 4 页
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈