日志
- 分享
MapReduce:详解Shuffle过程
-
2016-1-8 20:33
-
别人的成果,非常细致,仅仅用作借鉴,供大家参考,顺便给原著做推广 原著: http://langyu.iteye.com/blog/992916 /** * author : 冶秀刚 * mail : dennyy99@gmail.com */ Shuffle过程是MapReduce的核心,也被称为 ...
-
1069 次阅读|0 个评论
- 分享
java jdbc 好就没有使用Java jdbc操作数据库了,整理一下备用
-
2016-1-7 14:35
-
首先工程里面需要导入jdbc 的 jar包(好像没有附件功能,暂时不上传了), 创建jdbc连接: public Connection getConnection(){ String url = "jdbc:oracle:thin:@192.168.57.15:1521:zxptgbk"; String useName = "ningbo"; String pwdd = "aisino123"; try{ Class.forName("oracle.jdbc.drive ...
-
1557 次阅读|0 个评论
- 分享
plsql 连接不上oracle
-
2015-12-7 11:36
-
使用plsql 连接oracle时候,总是显示:监听程序不能解析在连接描述中给出的SERVICE_NAME,出现这个问题主要是没有配置tnsname, 在plsql软件打开后,选择Tool的perferences的Connection的OCI library 里面有一个路径:D:\Oracle\ora90\bin\oci.dll,找到oci.dll文件,然后编辑这个文件 添加: ORCL(设置的一个name 登录时 ...
-
1236 次阅读|0 个评论
热度 2
- 分享
sqoop导入oracle数据到hive字符集不同导致中文乱码问题
-
2015-12-4 20:30
-
最近在做sqoop导入oracle数据到hive字符集乱码问题,虽然没有解决,但是现在将一些尝试的过程发布,供大家参考,以后有遇到这种问题的供大家参考少走弯路。 oracle里面的字符集是us7ascii,导入到hive里面后中文乱码hive环境(元数据为mysql)字符集是utf,在命令里面使用convert(rd_yj,'UTF8','US7ASCII')和utl_raw.cast ...
-
10508 次阅读|2 个评论
热度 2
- 分享
spark-submit工具参数说明
-
2015-11-27 16:28
-
执行时需要传入的参数说明如下: Usage: spark-submit app jar | python file 参数名称 含义 --master MASTER_URL 可以是spark://host:port, mesos://host:port, yarn,yarn-cluster,yarn-client, local --deploy-mode DEPLOY_MODE Driver程序运行的地 ...
-
1620 次阅读|0 个评论
- 新手帮助
- 新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »