图文精华

hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...

About云-梭伦科技 › 日志

日志

最新发表的日志| 推荐阅读的日志 | Nutch | Docker | K8s | Flink | Hyperledgar | 比特币 | 以太坊 | 机器学习 | 图像处理 | NLP | 神经网络 | 其它 | ElasticSearch | 大数据 | Spark | Sqoop | Lucene | Solr | Nosql | Oozie | Cloudera系列 | ZooKeeper | Flume | Hadoop | Kafka | Hive | Hbase | Mapreduce | Storm | 人工智能 | 区块链 | openstack | 物联网 | 容器

分享 Linux释放buff/cache: Aningorg 2022-3-18 09:11; Linux内存使用量超过阈值，使得Java应用程序无可用内存，最终导致程序崩溃。即使在程序没有挂掉时把程序停掉，系统内存也不会被释放。 Cached只要用来缓存文件的，经常读写的文件会被缓存到Cached中，可以增加读写效率, 当项目主要就是处理文件时，所有接收和下载的文件会被缓存起来，一直耗着内存不释放，即 ...; 994 次阅读|0 个评论热度 1001

分享没工作经验到底有那些坑，该如何填坑解决: pig2 2018-7-2 10:19; 看到很多about云会员，铁粉及QQ群成员，当然也包括一些转行成员，而且整个IT行业很多人可能都面临这个问题，感到困惑。比如没有大数据工作经验，没有人工智能工作经验，该如何找这方面的工作。很多人可能有这方面的经历，学习这方面的技术有一两年的，可是没有做过项目，怎么找工作，公司怎么可能用没有项目经验的人 ...; 1762 次阅读|2 个评论热度 3

分享 hadoop3.1开始支持disk，网络，带宽等资源类型: pig2 2017-12-23 15:18; hadoop3.1资源类型支持比如： disk(YARN-2139), network(YARN-2140), and HDFS 带宽(YARN-2681). 链接：磁盘（disk） https://issues.apache.org/jira/browse/YARN-2139 网络（network） https://issues.apache.org/jira/browse/YARN-2140 HDFS 带宽 https://issues.apache.org/jira/browse/YARN-268 ...; 1859 次阅读|4 个评论热度 3

分享职业规划:选择Oracle ,Mysql还是Hadoop 纠结。。。: hadoop20161125 2016-11-30 17:51; 麻烦各位大神给指点一二，我今后应该往哪个方向发展？以前都是搞的比较杂，而且都不深入，感觉这样不会有大的突破，今后想专门往一个方向发展，可是又不知道选择哪个方向是好，是搞数据库(Oracle 或 Mysql)还是搞Hadoop 非常纠结，最好提供一个学习路线，望大神们给指点一二，万分感谢! ...; 1448 次阅读|5 个评论热度 5

分享 docker UI之shipyard源码编译安装过程: easthome001 2016-10-10 15:00; Shipyard在本地重新编译源码安装方式一：说明 1.1：好处通过将源码下载到本地重新编译安装可以任意的修改源码，修改功能。 1.2：shipyard项目说明整个项目是通过go语言实现核心逻辑部分，也就是说是通过golang语言调用的 Docker Remote API然后使用angular.js+semantic实现的UI部分。这两部 ...; 4626 次阅读|4 个评论热度 3

分享 mapreduce复习: xw2016 2016-7-5 23:23; 今天复习了一下mapreduce工作原理，感觉还不是很清晰，百度了好几篇相关文章，小结一下。 MapReduce 角色 client：编写mapreduce程序，提交作业。 JobTracker: 初始化作业，分配作业，与TaskTracker通信，协调整个作业。 TaskTracker：保持与JobTracker的通信，在分配的数据片段上执行Map或Reduce任务，TaskTracker ...; 1950 次阅读|0 个评论热度 3

分享学习大数据、云技术如何提高部署学习效率:解决不断重复反复部署慢难题: pig2 2015-8-1 19:26; 问题导读 1.如何避免反复部署集群？ 2.快照的作用是什么？ 3.缓存服务器能起到什么作用？学习大数据、云技术，我们首先应该掌握的是部署，通过部署，我们认识hadoop、openstack等大数据、云技术。所以部署是我们入门的第一步。在我们学习的过程中，部署异常是经常遇到的问题，当然如果比较 ...; 2513 次阅读|4 个评论热度 5

分享 HBase 负载均衡: s060403072 2015-6-29 21:46; HBase 可以根据当前集群的负载以region为单位进行rebalance。在HMaster中，后台会起一个线程定期检查是否需要进行rebalance，线程叫做BalancerChore。线程每隔 hbase.balancer.period会定期执行 master.balance()函数，配置项默认300000毫秒，5分钟。每次balance最多执行 hbase.balancer.max.balancing，如果没有配 ...; 2198 次阅读|1 个评论热度 4

分享 Zookeeper 在Hadoop中的应用: xuanxufeng 2015-6-23 22:50; Zookeeper 简介 Zookeeper 分布式服务框架是 Apache Hadoop 的一个子项目，它主要是用来解决分布式应用中经常遇到的一些数据管理问题，如：统一命名服务、状态同步服务、集群管理、分布式应用配置项的管理等。 Hadoop简介 Hadoop 是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不 ...; 1692 次阅读|2 个评论热度 3

分享 openstack kilo安装遇到问题汇总记录: pig2 2015-5-29 01:54; /var/lib/nova/instances/7189b31d-13c4-471b-a20a-9690574bb4aa/console.log TRACE nova.compute.manager libvirtError: Requested operation is not valid: cpu affinity is not supported 2015-05-26 15:54:31.129 33746 INFO nova.api.openstack.wsgi HTTP exception thrown: The resou ...; 6985 次阅读|20 个评论热度 7

12 3 4 5 / 5 页下一页

推荐 /2

关于我们· 联系我们· 加入我们· 小黑屋· 合作伙伴

Copyright © 2001-2024 About云-梭伦科技 Powered by Discuz! X3.4 Licensed Discuz Team.

简书 / 京ICP备2020039040号简书网举报电话：021-34700000

意见
反馈