日志
- 分享
spark开发必须注意Scala版本
-
2018-9-3 21:15
-
使用的版本是spark2.3： spark发布，都会在官网公布所支持的Scala版本，但是新手开发往往容易忽略这个问题，所以在出现错误的时候，根本无从下手。下面错误是由于Scala版本问题所造成的错误。 Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Object;) Ljava/lang/O ...
-
919 次阅读|0 个评论
- 分享
Hadoop3.x改变了多副本冗余暂用大量存储空间的问题
-
2018-8-27 11:03
-
问题导读 1.Hadoop3.x通过什么方式来容错？ 2.Hadoop3.x存储开销减少了多少？ 3.Hadoop3.x MR API是否兼容hadoop1.x？ 最新经典文章，欢迎关注公众号 1.目的 在这篇文章中，我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能，Hadoop3中兼容的Hadoop 2程序，Hadoop ...
-
2582 次阅读|0 个评论
- 分享
Kafka 2.0.0版本新增改变了哪些功能详细
-
2018-8-2 17:47
-
问题导读 1.offset保留时间默认原先从一天改为几天时间？ 2.https是哪个参数的值？ 3.统计kafka2.0中修改了哪些属性？ 原文链接 http://www.aboutyun.com/forum.php?mod=viewthreadtid=24981 获取最新文章，学习资源，可以关注公众号 1. KIP-186 将默认offset保留时间从1天增加到7 ...
-
1812 次阅读|0 个评论
- 分享
kafka sql详解
-
2018-7-16 16:15
-
问题导读 1.kafka sql与数据库sql有哪些区别？ 2.KSQL有什么作用？ 3. KSQL流和表分别什么情况下使用？ KSQL，一个用于Apache Kafka流的SQL 引擎。 KSQL降低了流处理的入口，提供了一个简单而完整的交互式SQL接口，用于处理Kafka中的数据。 不再需要编写Java或Python代码！ KSQL是开源的（Apach ...
-
1857 次阅读|0 个评论
- 分享
如何开启VT（支持虚拟机）
-
2016-5-20 07:09
-
当我们使用虚拟机的时候，有的电脑没有开启VT，就需要我们进入 bios 联想台式机win7怎么进入bios设置 网上资料比较多而且比较乱，这里分享给大家 按照F1键 然后进入高级，找到VT即可
-
1014 次阅读|0 个评论
- 分享
hadoop【2.7.1】【多节点】集群配置【必知配置知识1】
-
2015-10-19 16:43
-
问题导读 1.说说你对集群配置的认识？ 2.集群配置的配置项你了解多少？ 3.下面内容让你对集群的配置有了什么新的认识？ 目的 目的1： 这个文档描述了如何安装配置hadoop集群，从几个节点到上千节点。为了学习hadoop，你可能先从单节点入手 (查看 Single Node Setup).这里有中文 ...
-
3160 次阅读|0 个评论
- 分享
查看Linux文件大小的命令
-
2015-7-7 11:38
-
du -sh 文件 du -sh hadoop
-
1148 次阅读|0 个评论
- 分享
hadoop2.7新增功能
-
2015-4-24 11:00
-
hadoop2.7新增功能 版本更新说明： http://hadoop.apache.org/docs/r2.7.0/ Common 当使用HTTP proxy server时，认证有所加强.这是对于使用proxy server访问WebHDFS是非常有用的 一种hadoop新的允许直接写Graphite的标准库 规范了HCFS（Hadoop Compatible Filesystem ）的相关帮助 HDFS 支持POSIX风 ...
-
1350 次阅读|0 个评论
- 分享
优化Redis内存的9个要点
-
2015-4-12 23:55
-
优化Redis内存的9个要点 1.注意在redis.conf中的小聚合数据类型的特殊编码设置： hash-max-zipmap-entries 64 (hash-max-ziplist-entries for Redis = 2.6) hash-max-zipmap-value 512 (hash-max-ziplist-value for Redis = 2.6) list-max-ziplist-entries 512 list-max-ziplist-val ...
-
4473 次阅读|0 个评论
- 分享
openstack官网创建外网（错误纠正），其他租户看不到，
-
2015-3-15 15:07
-
admin创建外网： neutron net-create ext-net -- shared --router:external=True demo租户看不到的原因是因为没有加上参数 -- shared
-
1425 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
