用户组:游客
场景:任意时刻需要存储大量的高频数据 存储后 key按照时分秒设计 当数据多线程大批量写入后 其它程序读取时无法获取最新的一部 ...
spark thrift server 怎么配置每台能分配到资源,提交是yarn
有人编译过apache-hawq-src-2.0.0.0-incubating吗,能提供下编译后的包?我环境一直编译不了.谢谢
有C++和linux开发经验,0基础java经验,想学大数据挖掘和机器学习。需要重点学习java中的哪些知识?java web部分是否必须学习? ...
请问下Hadoop完全分布式集群搭建好之后 通过浏览器查看集群情况,必须要局域网的电脑登陆这个网站才能查看吗 还是外网也可以。还 ...
问下,hive安装的mysql要部署在hadoop环境吗?还是独立部署一台机,通过hive去掉就行
[mw_shl_code=java,true]import java.util.ArrayList; import java.util.List; public class Torment { public stati ...
机器16core(32 超线程) 64G yarn.nodemanager.resource.cpu-vcores=32 mapreduce.reduce.cpu.vcores=1 mapreduce.reduce ...
怎么把hadoop 里面wordcount 这个工程用source insight 查看
使用zeppelin查询mysql数据,不管是字符串类型还是整型,长一点的数据末尾两位被四舍五入了。比如.....55832 成了 ...55800 可 ...
我将hadoop设为高可用以后,datanode节点看不全 我做了两个namenode,一共4个datanode 为什么active的namenode能看到两个data ...
我在笔记本(i7CPU,6G内存)上开了2台ubuntu虚拟机(1核2核心,1G内存)和本机组成3台集群环境,现在的问题是,在虚拟机内部执行 ...
在hive执行时留下的蛛丝马迹:Failed with exception org.apache.hadoop.hdfs.server.namenode.NotReplicatedYetException: Not ...
----案例---- flume采集 tomcat运行日志: 1.哪个时间段出现错误为“严重”最多 2.出现异常类型数量的排行 tomca ...
kettle 怎么连接Hbase ,并插入数据?
突然有需求,在hadoop集群中,需要关闭或者休眠某些datanode节点。正常来说,撤销节点之前datanode会进行备份,数据块传输到其他 ...
大家好,请问,对于一个大数据团队,你们的项目成员如何配置的
大神帮忙看下,这是啥问题 ? temp.take(2) [(2, [4, 5, 5, 1, 4, 3, 3, 3, 4, 3, 4, 3, 3, 4, 5, 1, 4, 5, 4, 4, 3, 3, 4, ...
现有环境ZK=3.4.6 由于总是出现未修复的BUG,想升级到3.4.10或者3.4.11 HADOOP=2.6.0 出现的BUG也不少,想升级到2.6.5 HBASE= ...
如题
大数据入门难吗?难学吗? 本人有C++和linux编程经验,能看懂常见机器学习算法。
如题: hbase-hduser-master-slave2.log显示内容如下: 2018年 03月 22日 星期四 18:06:02 CST Stopping hbase (via master) ...
大数据一般解决哪些问题比较好?
我最近有个实现,rdd存的是一个多边形的边界,通过WKT来进行判断这个边界是否与另外一个多边形边界数组存在相交的状态,然后在集群 ...
想实现row_number()功能 ,如 data01,data02字段 a,7 a,2 a,3 b,2 b,3 c,9 实现按ID分组加1 a1,7 a2,2 a3,3 b1,2 b2 ...
用java8 写spark程序, 在最后一步,为何报错需要序列化 List list = Arrays.asList(1,2,3,4,5); JavaRDD rd ...
用的hadoop-3.1.2,hbase-2.1.4,zookeeper-3.4.14。参照其他人的配置:https://blog.csdn.net/wx2007xing/article/details/8871 ...
=====================(从文章中间开始为正确安装的解决方案)====== (1) # xz -d Python-2.7.11.tar.xz # tar ...
这个问题昨天晚上发现的,前几天想在测试环境部署个宙斯调度系统,github上有安装说明,不是很难的东西,步骤也很少, 编译打 ...
ntp是很多集群必备的软件。但是在设置开机启动却失效。多次尝试仍然失败,原来是因为服务冲突了。 解决办法: [mw_shl_code= ...
本版积分规则 发表帖子
查看 »