立即注册 登录
About云-梭伦科技 返回首页

redhat1986的个人空间 https://www.aboutyun.com/?6183 [收藏] [复制] [分享] [RSS]

日志

分享 Hive详细教程
2014-12-30 18:00
基于 Hadoop 的大数据的计算 / 扩展能力 支持 SQL like 查询语言 统一的元数据管理 简单编程 Hive的安装 1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据,同时可以查询hadoop中的数据。 本质上讲,hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapR ...
个人分类: 转载|1049 次阅读|0 个评论
分享 Centos安装配置NTP
2014-12-29 21:02
NTP是用来使系统和一个精确的时间源保持时间同步的协议。建议大家在自己管理的网络中建立至少一台时间服务器来同步本地时间,这样可以使得在不同的系统上处理和收集日志和管理更加容易,而且不会出错。 官方网站是:http://www.ntp.org/ 从上面我们可以获得Linux下的源代码,以及互联网上的公开的NTP服务 ...
个人分类: 转载|761 次阅读|0 个评论
分享 CentOS 6.3下NTP服务安装和配置(局域网可以自己搭个ntpServer供其他服务器同步时间)
2014-12-29 20:59
测试环境: NTPserver 192.168.1.252 NTPclient 192.168.1.251 准备工作: 关闭selinux: vi /etc/selinux/config SELINUX=disabled 关闭iptables: service iptables stop chkconfig iptables off 一.安装NTP软件包: yum -y install ntp /*yum安装NTP服务*/ chkconfig --add ntpd /*添加NTP ...
个人分类: 转载|1071 次阅读|0 个评论
分享 CentOS下安装JDK7
2014-12-25 20:55
下载地址:http://www.oracle.com/technetwork/java/javase/downloads/java-se-jdk-7-download-432154.html 1. 安装JDK1.7.0 下载完成后在取得root权限后执行: # sudo rpm -ivh /目录/jdk-7-linux-x64.rpm 执行结果: Preparing... # ################################## 1:jdk # #### ...
个人分类: 转载|694 次阅读|0 个评论
分享 CentOS下的账户管理
2014-12-25 20:44
CentOS下的账户管理 在Linux中,每个文件都分3类权限:账户本身的权限,账户所在群组的权限和其它权限。账户和群组是多对多的关系,即一个账户可以属于多个群组,一个群组可以包含多个账户。但是,对于每一个已登录的账户,只能存在一个当前生效的群组(初始群组)。 账户管理相关配置文件如下:账户信息文件是/etc/passw ...
个人分类: 转载|764 次阅读|0 个评论
分享 CentOS Linux 添加用户useradd与删除用户userdel
2014-12-25 20:40
1. 使用管理员账号登陆系统,建立用户tmp_3452 密码3sdt5:Eawhg 添加用户命令: # adduser tmp_3452 修改密码命令: # passwd tmp_3452 在系统出现提示输入密码是输入密码:3sdt5:Eawhg 系统提示输入确认密码后再输入一次。OK添加成功。 2. 删除刚创建的账号 tmp_3452 删除用户命令: # userd ...
个人分类: 备忘录|623 次阅读|0 个评论
分享 解析Spark在腾讯、雅虎、优酷的成功应用
2014-12-23 09:38
解析Spark在腾讯、雅虎、优酷的成功应用
为了满足挖掘分析与交互式实时查询的计算需求,腾讯大数据使用了 Spark 平台来支持挖掘分析类计算、交互式实时查询计算以及允许误差范围的快速查询计算,目前腾讯大数据拥有超过 200 台的 Spark 集群,并独立维护 Spark 和 Shark 分支。 Spark 集群已稳定运行 2 年,我们积累了大量的案例和运营经验能力,另外多个 ...
个人分类: 转载|847 次阅读|0 个评论
分享 大数据存储方案
2014-12-22 14:10
最近公司准备做hadoop平台处理各种数据:文件的、关系数据库的等等,有没有人做过这样的存储方案分享一下? 补充说明: 1.我们想做一个手机端APP数据采集、购物网站日志数据及交易数据采集。将这些数据全部放到hadoop平台做数据分析,分析用户行为,然后给用户推荐产品。 2.手机端采集的数据保存在oracle中,购物网站的 ...
个人分类: 求分享|1084 次阅读|5 个评论 热度 3
分享 ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D
2014-12-20 15:00
Logging initialized using configuration in file:/home/hadoop/hive-0.14.0/conf/hive-log4j.properties SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in SLF4J: Found binding in SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation. SLF4J: Actua ...
个人分类: 遇到过的问题|4310 次阅读|0 个评论
分享 linux ssh 问题
2014-12-19 09:18
The authenticity of host 'hadoopm (192.168.25.34)' can't be established. RSA key fingerprint is ba:35:67:c9:ee:76:54:8a:49:5c:5c:4e:cc:51:10:fb. Are you sure you want to continue connecting (yes/no)? hadoop1: stopping namenode 执行ssh -o StrictHostKeyChecking=no 192.168.xxx.xxx
个人分类: 遇到过的问题|410 次阅读|0 个评论
关闭

推荐上一条 /2 下一条