立即注册 登录
About云开发 返回首页

hyj的个人空间 https://www.aboutyun.com/?2 [收藏] [复制] [分享] [RSS]

统计信息

已有 914 人来访过

    现在还没有相册

  • 性别
  • 生日
  • 学历博士

查看全部个人资料

    现在还没有动态

Python 3.7 下安装face_recognition必须先有dlib库 2020-05-07
Python 3.7 下安装face_recognition必须先有dlib库,而一般方式安装很麻烦,使用whl文件就可以直接安装,无需编译。 安装办法:下载资源文件,解压出dlib-19.1 ...
(534)次阅读|(0)个评论
Hadoop(MapR)分布式安装及自动化脚本配置 2020-02-02
 MapR的分布式集群安装过程还是很艰难的,远远没有计划中的简单。本人总结安装配置,由于集群有很多机器,手动每台配置是很累的,编写了一个自动化配置脚本,下 ...
(369)次阅读|(0)个评论
hive instr使用及例子 2019-12-25
instr(string str, string substr) 查找字符串str中子字符串substr出现的位置,如果查找失败将返回0,如果任一参数为Null将返回null,注意位置为从1开始的 ...
(5501)次阅读|(0)个评论
在 Kafka内部存在两种默认的分区分配策略 2019-10-22
以下内容,来自About云VIP--笑笑分享的分区策略记录: 在 Kafka内部存在两种默认的分区分配策略:Range和 RoundRobin。 Range是默认策略。Range是对每 ...
(364)次阅读|(0)个评论
大数据Hadoop Yarn Hbase Hive Zookeeper默认端口汇总 2019-10-22
以下内容来自About云VIP 生辉,比较宝贵,记录保存下。 HDFS DataNode 50010 dfs.datanode.address datanode服务端口,用于数据传输  HDFS ...
(415)次阅读|(0)个评论
spark io.eofexception:unexpected end of input stream 2019-05-25
spark io.eofexception:unexpected end of input stream 原因: 数据源的问题,比如一些非常规的文件需要考虑进入,比如gz包等
(529)次阅读|(0)个评论

查看更多

你需要登录后才可以留言 登录 | 立即注册


mark_xu 2020-4-15 17:30
你好请问在cdh6.x上如果安装spark2,版本如果对应
jiewuzhe02 2018-2-12 08:03
  
我爱about 2017-6-16 10:05
哈哈,看了深夜食堂,感觉最好笑的一句话就是,世界分三种人,男人,女人,女博士。楼主不要打我
macWang 2017-6-5 09:50
博主你好,请问一下,你对sparkContext.newAPIHadoopFile熟悉吗?想请教你怎么去设置它生成的RDD的分区数。旧的hadoopFile会有一个numPartition参数,可是新的API没有,试了几种方式都不行,请指教一下,谢谢
zouzhi 2017-4-12 23:07
你好
zouzhi 2017-4-8 22:44
你好
zouzhi 2017-4-7 22:33
你好
zouzhi 2017-4-6 22:15
你好
tan_323 2017-3-23 11:10
您好,我照着这篇 http://www.aboutyun.com/thread-7684-1-1.html 文章配置好了hadoop2.2的集群,但是报了以下的错误, 17/03/20 10:40:53 INFO mapreduce.Job: Job job_1489976045893_0001 running in uber mode : false 17/03/20 10:40:53 INFO mapreduce.Job:  map 0% reduce 0% 17/03/20 10:40:53 INFO mapreduce.Job: Job job_1489976045893_0001 failed with state FAILED due to: Application application_1489976045893_0001 failed 2 times due to ApplicationMaster for attempt appattempt_1489976045893_0001 ... ...
hlyaowan 2017-3-15 16:57
看了你写的日志,你的技术好高啊,加我QQ好么?280977278 一起探讨技术。果然遇到大牛了,可以问下大牛在哪里上班吗?
阿里巴巴 2016-8-11 17:43
嘿嘿嘿加油
111222333 2016-4-16 10:06
您好,请问一下,当用ovs-vsctl add-port br-ex eth2命令后,为什么网络节点不能通过eth2上网了,我百度了下说是eth2是没有ip的,相当于沦为了二层交换机,是这样吗(eth2是虚拟机上外网的网卡)。还是说使用这个命令后,本身就已经是一个通路了(配置没错的前提下),假入我现在有个静态的可上网的Ip(假如:125.220.132.15),那创建外网子网可以这样吗?neutron subnet-create ext-net --name ext-subnet  --allocation-pool start=125.220.132.101,end=125.220.132.200  --disable-dhcp --gateway 125.220.132.15&n ... ...
小拍 2016-2-29 07:27
你好
jayyang 2016-1-9 12:25
不错不错,加油
rambo_js1019 2015-12-24 15:15
你好,有用过hadoop的工作流引擎吗,有没有比较简单点的,可以推荐一下,我看azkaban和Oozie都比较复杂啊。
pianai 2015-11-1 11:23
  
查看全部
关闭

推荐上一条 /5 下一条