日志
- 置顶 ·分享 spark开发基础：一文能帮助大家阅读比较常见的Scala程序
- 问题导读 1.Scala中有哪些常见符号？ 2.本文讲了哪些符号？ 3.你对符号的理解是什么？ 4.-,-,=,Int=,_ 它们含义是什么？用在什么地方？ 当我们学习spark的时候，我们知道spark是使用Scala语言开发的，由于语言是相通的，所以对于传统程序员【Java，.net，c等】，我们能看懂Scala程序是 ...
- 置顶 ·分享 hadoop、hbase、hive、zookeeper版本对应关系
- 最新版本： hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版本对应关系: Hbase Hadoop 0.92.0 1.0.0 0.92.1 1.0.0 0.92.2 1.0.3 0.94.0 1.0.2 0.94.1 1.0.3 0.94.2 1.0.3 0 ...
- 分享 出现org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z .
-
运行程序出现问题： Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z at org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Native Method) at org.apache.hadoop.io.nativeio.NativeIO$Windows.access(Nativ ...
- 分享 hbase编程：Eclipse远程连接创建hbase表以及填充列与列数据
- 问题导读 1.如何通过Java ap创建表？ 2.如何对已存在的表插入列以及列值？ 远程创建表与数据，这是在 hbase开发环境搭建及运行hbase小实例（HBase 0.98.3新api） 基础上一个基础，我们创建表之后，该如何填充数据， 我们看下面代码.首先实例化HTable HTable table = new HTable(conf, By ...
- 分享 Eclipse远程连接之后，如何调出Map/Reduce Locations
- 新手指导：Windows上使用Eclipse远程连接Hadoop进行程序开发 hadoop2.2 eclipse链接hdfs(hadoop) 配置Hadoop 2.x开发环境（Eclipse） 上面三篇都是远程连接，但是有时候，我们会遇到下面问题 在配置单时候找不到Mapreduce/location 下面教给大家怎么调出“ Map/Reduce Loc ...
- 分享 mapreduce分析日志所隐藏的规律
- 我们写mapreduce的过程中，会不会产生这些疑问。比如： 我们在 MapReduce初级案例（3）：使用MapReduce实现平均成绩 ，我们会特意，换行，让mapreduce能够识别。 1）math： 张三 88 李四 99 王五 66 赵六 77 复制代码 ...
- 分享 about云分析discuz论坛apache日志hadoop大数据项目：hive与hbase是如何整合使用的
- 此篇需要具有hive、hbase整合基础，可以参考： hive与hbase整合原理介绍 hbase0.96与hive0.12整合高可靠文档及问题总结 这里说一下项目实现的思路，此篇属于项目需求文档：数据的清洗以及导入hbase、hive准备工作 一、准备工作 首先我们启动hadoop、hbase、hive 如下图所示： 1.启动hadoop ...
- 分享 discuz论坛apache日志hadoop大数据项目：hbase、hive数据加载思路分析
- hbase与hive实现 about云分析discuz论坛apache日志hadoop大数据项目思路 有很多： 目标： 实现数据能否同时注入hbase与hive 实现方式： 1.hbase通过BulkLoad加载、hive使用创建外部表的方式 2.hbase通过TableOutputFormat 方式、在reduce中直接生成put对象写入HBase，于此同时hive亦能查询数据，详细参考 ...
- 分享 Java开发环境移植
- 我们有时候会碰到Java开发环境移植错误。 这是因为我们引用了自己本地（jdk）环境，而没有使用默认jre环境导致。 这样移植会产生问题。
- 分享 hive如何对复合数据类型创建索引
- 问题导读： 1.符合数据类型如何创建索引？ 2.hive能否对其中属性做索引？ 本人在下面基础上做一个扩张： hive复合数据类型 array、map、struct使用 我们知道hive可以创建索引，那么对于符合数据结构，里面包含比较多的属性，如下面： 学生表中info，包含 name 与 age 。 hive creat ...
- 分享 hbase开发环境搭建及运行hbase小实例（HBase 0.98.3新api）
- 问题导读： 1.如何搭建hbase开发环境？ 2.HTableDescriptor初始化产生了那些变化？ 3.eclipse如何连接hbase集群？ hbase开发环境搭建与hadoop开发环境搭建差不多的。这里是以win7为例。 首先我们看一下hadoop的开发环境搭建，参考 hadoop开发方式总结及操作指导 http://www.aboutyun.com/thread-6950 ...
- 分享 获取hadoop、hbase源码产生Plugin execution not covered by lifecycle configuration ...
- 问题导读： 1.使用eclipse maven插件下载源码，pom.xml不能识别goal的原因是什么？ 2.产生Plugin execution not covered by lifecycle configuration该如何解决？ 3.pluginManagement标签的作用是什么？ 本文链接： http://www.aboutyun.com/thread-8353-1-1.html Plugin execution not covered by l ...
/2 
