日志
- 分享
java.lang.OutOfMemoryError： unable to create new native thread解决办法
-
2017-2-20 21:03
-
以前常遇到此问题，一般想法就是修改配置启动参数，想方设法增大参数，认为这样可以避免内存溢出。但效果基本上还是会出错 这个异常问题本质原因是我们创建了太多的线程，而能创建的线程数是有限制的，导致了异常的发生。能创建的线程数的具体计算公式如下： (MaxProcessMemory - JVMMemory - ReservedOsMemory) ...
-
1494 次阅读|0 个评论
- 分享
hbase配置了kerberos认证后，java访问hbase的时候，链接那边要怎么写？【记录以后解决 ...
-
2015-7-7 15:45
-
hbase配置了kerberos认证后，java访问hbase的时候，链接那边要怎么写？
-
1502 次阅读|0 个评论
- 分享
Spark Streaming 对数据流的“批处理”不是“流处理”的原因
-
2015-7-2 01:37
-
目前存在着很多种在实时数据被保存进数据库之前系统对这些数据进行处理的方式。例如，现在最常见的两个开源平台就是 Apache Storm 和 Apache Spark （带有它自身 Spark Streaming 框架），它们都拥有一种非常特有的处理数据流的方法。 Storm ，像 SQLstream Blaze 、 IBM InfoSphere Str ...
-
2857 次阅读|0 个评论
- 分享
HBase的写事务，MVCC及新的写线程模型
-
2015-6-22 17:08
-
MVCC是实现高性能数据库的关键技术，主要为了读不影响写。几乎所有数据库系统都用这技术，比如Spanner，看 这里 。Percolator，看 这里 。当然还有mysql。本文说HBase的MVCC和0.98引入的新写线程模型。 HBase region server的存储模型类LSM，将随机写转换为顺序写，写操作直接写内存，然后写操作日志 ...
-
1690 次阅读|0 个评论
- 分享
推荐引擎mahout安装与配置
-
2015-6-18 23:39
-
一、硬件环境 操作系统 ：Linux ubuntu-13.04-desktop-i386 jdk安装版本 ：jdk-7u51-linux-i586 Hadoop版本 ：Hadoop-1.1.1（一个Namenode，三个Datanode部署） 二、安装步骤 在Mahout安装之前读过几篇有关机器学习的文章，面对协同过滤、分类聚类等算法的讲解我是深感无力啊，那么深奥的算法实现简直看着就要哭了好 ...
-
1578 次阅读|0 个评论
- 分享
Heron(一)—-storm的一些短板
-
2015-6-18 23:37
-
twitter在使用storm过程中发现了一些storm的弊端，开发Herons相对storm需要提升的几个特性：1）更好的扩展性， 2）更容易调试 3）更高的性能 4）更好管理–可以和其他系统复用资源 storm的短板： 1）storm的worker调度策略非常复杂，一台机器上的多 ...
-
1841 次阅读|0 个评论
- 分享
Apache Mesos入门，它是什么？
-
2015-6-10 16:49
-
Apache Mesos的官方网站的描述 分布式系统内核 Mesos采用与Linux kernerl相同的机制，只是运行在不同的抽象层次上。Mesos kernel利用资源管理和调度的API在整个数据中心或云环境中运行和提供引用（例如，Hadoop，Spark，Kafaka，Elastic Search）。即Apache Mesos在整个数据中心根据资源利用率和资源占用情况，在整个数据 ...
-
2202 次阅读|0 个评论
- 分享
数据仓库也需要大数据
-
2015-5-22 00:36
-
项目背景 最近在处理一个商业银行的大数据项目，旨在构建大数据资源池，项目边界确认过程中，针对项目的定位出现了两种不同的观点，对大数据的在传统行业的应用有了新的启发。观点一、大数据作为操作数据历史库，存储操作数据库数据，提供历史数据长周期，快速检索的历史数据存储和快速查询服务。观点二、大数据作为数 ...
-
846 次阅读|0 个评论
- 分享
MemStore刷写线程—MemStoreFlusher源代码分析
-
2015-5-14 00:57
-
在HBase中表由一个或多个Region组成，而Region由一个或者多个Store组成，Store又由一个MenStore和若干个StoreFile组成。无论是向HBase写入数据还是请求读数据，都首先经过MemStore，对于写请求来说就是将数据直接写入MemStore，对于读请求来说就是先检查MenStore中是否包含相应的数据，如果有则直接读取该数据，否 ...
-
885 次阅读|0 个评论
- 分享
OpenStack Kilo版本社区贡献分析
-
2015-5-13 22:56
-
OpenStack Kilo版本已经于2015年4月30日正式Release，这是OpenStack第11个版本，距离OpenStack项目推出已经整整过去了5年多的时间。在这个阶段OpenStack得到不断的增强，同时OpenStack社区也成为即Linux之后的第二大开源社区，参与的人数、厂商众多，也成就了OpenStack今天盛世的局面。虽然OpenStack在今年经历 ...
-
2070 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
