分享

大数据组件使用

本帖最后由 yuwenge 于 2018-5-5 21:28 编辑

描述:里面介绍各个组件的例子,包括hbase,kafka,solr,spark等

详细如下:
.idea        增加访问Solr集群代码         
azkaban-demo/command        Azkaban Command示例         
generatedata        flume写数据到solr         
hbasedemo        使用Java将图片生成sequence file并保存到HBase         
hdfsdemo        Java使用HttpClient访问启用SSL的HttpFS服务         
impala-tpcds        新增Impala tpcds测试脚本及99条基准测试SQL         
jdbcdemo        1.增加JDBC连接启用Sentry并集成LDAP的HiveServer2         
kafkademo        添加读本地文件封装json数据并写入kafka,对应微信公众号的《如何使用StreamSets实时采集Kafka并入库Kudu》
livydemo        删除无用的文件         
mrdemo        如何使用java命令向CDH集群提交MapReduce作业,增加run脚本
ooziedemo        增加通过Oozie API接口向Kerberos环境提交Shell作业         
samldemo        新增Oozie API接口向         
solrdemo        HDFS访问示例         
sparkdemo        SparkStreaming通过自定义Receiver读取HBase将数据写入HDFS         
yarndemo/lib        添加访问Kerberos环境下Livy RESTful API接口示例         
cdhproject.iml        hadoop各组件使用,持续更新         
pom.xml        新增Oozie API接口向         
从入门到精通-Fayson带你玩转CDH.png        从入门到精通 - Fayson带你玩转CDH         


1.png

地址:
https://github.com/fayson/cdhproject


本帖被以下淘专辑推荐:

已有(3)人评论

跳转到指定楼层
恋枫缩影 发表于 2018-5-6 00:10:47
不错,各种的组件的使用demo都有,谢谢楼主分享
回复

使用道具 举报

smile_xiaoyong 发表于 2018-5-21 10:40:46
感谢楼主分享
回复

使用道具 举报

mwonder2 发表于 2019-5-2 21:46:12
感谢楼主分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条