分享 PMML简述
喵十八 2018-7-8 18:12
PMML简介 模型预测标记语言(Predictive Model Markup Language)是由Dr. Robert Lee Grossman 提出的一种基于XML的存储模型的格式标准。 这里的模型是指那些由数据挖掘和机器学习算法生成的预测模型。PMML为不同的数据分析软件或者编程语言,提供了一种轻松共享预测分析模型的方式。它支持常见的模型,比如逻辑 ...
1441 次阅读|0 个评论
分享 没工作经验到底有那些坑,该如何填坑解决
pig2 2018-7-2 10:19
没工作经验到底有那些坑,该如何填坑解决
看到很多about云会员,铁粉及QQ群成员,当然也包括一些转行成员,而且整个IT行业很多人可能都面临这个问题,感到困惑。比如没有大数据工作经验,没有人工智能工作经验,该如何找这方面的工作。 很多人可能有这方面的经历,学习这方面的技术有一两年的,可是没有做过项目,怎么找工作,公司怎么可能用没有项目经验的人 ...
1778 次阅读|2 个评论 热度 3
分享 SASL配置
heraleign 2018-7-1 11:57
1、在其中一台主机执行,然后发送生成的 lyw_ca_key 和 lyw_ca_cert 到其他主机,这个地方特别注意,这个master是主机名 $ openssl req -new -x509 -keyout lyw_ca_key -out lyw_ca_cert -days 9999 -subj '/C=CN/ST=ChongQing/L=Yubei/O=heraleign/OU=security/CN=master' Generating a 2048 bit RSA private key ... ...
1131 次阅读|0 个评论
分享 NTP
heraleign 2018-7-1 11:51
安装: 服务端 # yum install ntp # chkconfig ntpd on # ntpdate -u 202.112.10.36 # more /etc/ntp.conf # For more information about this file, see the man pages # ntp.conf(5), ntp_acc(5), ntp_auth(5), ntp_clock(5), ntp_misc(5), ntp_mon(5). driftfile /var/lib/ntp/drift # Permit tim ...
838 次阅读|0 个评论
分享 Kerberos配置
heraleign 2018-7-1 11:48
写在前面: 系统是centos7 :CentOS-7-x86_64-DVD-1708.iso 1、需要关闭防火墙,或者添加防火墙访问限制,否则在客户机初始化时会报 # kinit admin/admin kinit: Cannot contact any KDC for realm 'EXAMPLE.COM' while getting initial credentials 1.1 查看防火墙状态 # service firewalld status Redirecting t ...
2292 次阅读|0 个评论
分享 哈哈哈
spftoto 2018-6-26 09:39
一个MR的面试题 http://www.aboutyun.com/forum.php?mod=viewthreadtid=24483 (出处: about云开发-活到老 学到老)
860 次阅读|0 个评论
分享 hbase memstore设置无效解决思路
langke93 2018-6-14 10:43
sqlserver中的数据导入至HBase中一张表数据2kw左右,使用的是kettle工具,大量的数据导入可能会产生compaction,这里memestore设置的是128m,但是在执行至memstore至30m大小开始flush就开始flush了,请问这是什么原因? 建议: 1.RS 内存设置太小 memstore默认占40% 2.HF达到允许的最大数量 具体看 hbase.hstore.block ...
1493 次阅读|0 个评论
分享 要怎么设置HDFS可以根据磁盘空间百分比来负载均衡呢?
desehawk 2018-6-13 16:28
集群有2台机器,磁盘大小1台1TB、另1台300GB,然后300GB那台经常空间告警。 要怎么设置HDFS可以根据磁盘空间百分比来负载均衡呢? 根据空间百分比平衡的是这个hdfs-site.xml 中的这个配置项: dfs.datanode.available-space-volume-choosing-policy.balanced-space-preference-fraction 来自 about云1 ...
1613 次阅读|0 个评论
分享 Operation category READ is not supported in state standby
desehawk 2018-6-11 18:31
RemoteException(org.apache.hadoop.ipc.StandbyException): Operation category READ is not supported in state standby 两个namenode都是standby 在一台主机上执行: hdfs haadmin -transitionToActive --forcemanual nn1 再访问,一台active 一台standy
1799 次阅读|0 个评论
分享 在hadoop上运行MapReduce程序没有显示All Application
zhengtao 2018-5-28 10:13
我是在eclipse上连接hadoop伪分布式集群,然后运行MapReduce程序,有log4.properties能够在控制台看到日志信息,但是我在网页上看不到作业页面,nodes是开启的.如下图 哪位大佬可以帮助一下吗?
824 次阅读|1 个评论 热度 1
关闭

推荐上一条 /2 下一条