立即注册 登录
About云开发 返回首页

hyj的个人空间 https://www.aboutyun.com/?2 [收藏] [复制] [分享] [RSS]

统计信息

已有 983 人来访过

    现在还没有相册

  • 性别
  • 生日
  • 学历博士

查看全部个人资料

    现在还没有动态

面试必备Hive stage划分 2021-03-25
Hive stage划分见下图: 更多细节可参考 https://blog.csdn.net/weixin_43878293/article/details/102648655 https://blog.csdn.net/jiayuanv ...
(48)次阅读|(0)个评论
Azkaban安装 2021-02-02
Azkaban安装 1 Azkaban介绍 Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban定义 ...
(132)次阅读|(0)个评论
解决开发中由于group by造成数据倾斜解决办法 2021-01-19
如果设置hive.map.aggr为true,hive.groupby.skewindata为true,执行流程如下: 会生成两个job来执行group by,第一个job中,各个map是平均读取分片 ...
(209)次阅读|(0)个评论
Python 3.7 下安装face_recognition必须先有dlib库 2020-05-07
Python 3.7 下安装face_recognition必须先有dlib库,而一般方式安装很麻烦,使用whl文件就可以直接安装,无需编译。 安装办法:下载资源文件,解压出dlib-19.1 ...
(693)次阅读|(0)个评论
Hadoop(MapR)分布式安装及自动化脚本配置 2020-02-02
 MapR的分布式集群安装过程还是很艰难的,远远没有计划中的简单。本人总结安装配置,由于集群有很多机器,手动每台配置是很累的,编写了一个自动化配置脚本,下 ...
(454)次阅读|(0)个评论
hive instr使用及例子 2019-12-25
instr(string str, string substr) 查找字符串str中子字符串substr出现的位置,如果查找失败将返回0,如果任一参数为Null将返回null,注意位置为从1开始的 ...
(5803)次阅读|(0)个评论

查看更多

你需要登录后才可以留言 登录 | 立即注册


Chg.M 2021-2-22 11:09
亲,硕士小弟认不认
Chg.M 2021-2-22 11:08
下载你的一个资源,积分不够
Chg.M 2021-2-22 10:54
  
jinhero 2021-1-23 23:51
  
mark_xu 2020-4-15 17:30
你好请问在cdh6.x上如果安装spark2,版本如果对应
jiewuzhe02 2018-2-12 08:03
  
我爱about 2017-6-16 10:05
哈哈,看了深夜食堂,感觉最好笑的一句话就是,世界分三种人,男人,女人,女博士。楼主不要打我
macWang 2017-6-5 09:50
博主你好,请问一下,你对sparkContext.newAPIHadoopFile熟悉吗?想请教你怎么去设置它生成的RDD的分区数。旧的hadoopFile会有一个numPartition参数,可是新的API没有,试了几种方式都不行,请指教一下,谢谢
zouzhi 2017-4-12 23:07
你好
zouzhi 2017-4-8 22:44
你好
zouzhi 2017-4-7 22:33
你好
zouzhi 2017-4-6 22:15
你好
tan_323 2017-3-23 11:10
您好,我照着这篇 http://www.aboutyun.com/thread-7684-1-1.html 文章配置好了hadoop2.2的集群,但是报了以下的错误, 17/03/20 10:40:53 INFO mapreduce.Job: Job job_1489976045893_0001 running in uber mode : false 17/03/20 10:40:53 INFO mapreduce.Job:  map 0% reduce 0% 17/03/20 10:40:53 INFO mapreduce.Job: Job job_1489976045893_0001 failed with state FAILED due to: Application application_1489976045893_0001 failed 2 times due to ApplicationMaster for attempt appattempt_1489976045893_0001 ... ...
hlyaowan 2017-3-15 16:57
看了你写的日志,你的技术好高啊,加我QQ好么?280977278 一起探讨技术。果然遇到大牛了,可以问下大牛在哪里上班吗?
阿里巴巴 2016-8-11 17:43
嘿嘿嘿加油
111222333 2016-4-16 10:06
您好,请问一下,当用ovs-vsctl add-port br-ex eth2命令后,为什么网络节点不能通过eth2上网了,我百度了下说是eth2是没有ip的,相当于沦为了二层交换机,是这样吗(eth2是虚拟机上外网的网卡)。还是说使用这个命令后,本身就已经是一个通路了(配置没错的前提下),假入我现在有个静态的可上网的Ip(假如:125.220.132.15),那创建外网子网可以这样吗?neutron subnet-create ext-net --name ext-subnet  --allocation-pool start=125.220.132.101,end=125.220.132.200  --disable-dhcp --gateway 125.220.132.15&n ... ...
查看全部
关闭

推荐上一条 /5 下一条