会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
新际航
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
···
9
下一页
2018年9月26日
python处理数据pandas视频资料
摘要: python强大数据处理工具pandas视频资料:https://pan.baidu.com/s/17VRd1cgFaKi20drfCgZ8Gg
阅读全文
posted @ 2018-09-26 00:03 新际航
阅读(528)
评论(0)
推荐(0)
2018年9月25日
大数据-storm学习资料视频
摘要: storm学习资料视频 https://pan.baidu.com/s/18iQPoVFNHF1NCRBhXsMcWQ
阅读全文
posted @ 2018-09-25 23:33 新际航
阅读(232)
评论(0)
推荐(0)
大数据-spark-hbase-hive等学习视频资料
摘要: 不错的大数据spark学习资料,连接过期在评论区评论,再给你分享 链接:https://pan.baidu.com/s/1T3-Tzz6qXMuQ_lyGc_0xbQ 提取码:zofz
阅读全文
posted @ 2018-09-25 23:31 新际航
阅读(376)
评论(2)
推荐(0)
机器学习视频————2018最新版本机器学习易懂
摘要: 找到了一份比较全的机器学习视频分享给大家,不用花钱去买了,容易学习的机器学习资料,推荐学习,很不错的,连接如果过期,请在评论区留言我给你分享 链接:https://pan.baidu.com/s/1oD7t2VbwnZx8TZUFoSmxow 提取码:hkg4
阅读全文
posted @ 2018-09-25 23:27 新际航
阅读(360)
评论(6)
推荐(0)
2018年9月20日
hadoop的job执行在yarn中内存分配调节————Container [pid=108284,containerID=container_e19_1533108188813_12125_01_000002] is running beyond virtual memory limits. Current usage: 653.1 MB of 2 GB physical memory used
摘要: 实际遇到的真实问题,解决方法: 1.调整虚拟内存率yarn.nodemanager.vmem-pmem-ratio (这个hadoop默认是2.1) 2.调整map与reduce的在AM中的大小大于yarn里RM可分配的最小值yarn.scheduler.minimum-allocation-mb
阅读全文
posted @ 2018-09-20 16:02 新际航
阅读(6260)
评论(2)
推荐(1)
oozie的shell-action中加入hive脚本命令启动执行shell同时操作hive,抛异常Container killed on request. Exit code is 143 Container exited with a non-zero exit code 143
摘要: 使用oozie来调度操作,用shell的action执行命令,其中shell里包含着hive -e 操作执行时,oozie窗口报 这个异常,对应的在yarn的history里找到上面给出的job_id > job_1533108188813_12125 对应的日志,如下图 图中给出launch时候内
阅读全文
posted @ 2018-09-20 11:39 新际航
阅读(2815)
评论(1)
推荐(0)
2018年9月19日
hadoop——yarn——资源调度器
摘要: yarn调度器 https://blog.csdn.net/zmx729618/article/details/73321316?utm_source=blogkpcl9
阅读全文
posted @ 2018-09-19 18:57 新际航
阅读(132)
评论(0)
推荐(0)
2018年9月18日
presto 配置mysql.properties异常Database (catalog) must not be specified in JDBC URL for MySQL connector
摘要: 在presto 0.210 以后配置mysql.properties的时候,对于jdbc-url属性配置后面要加上对应要链接的database connection-url=jdbc:mysql://127.0.0.1:3306/presto_test 但是在0.210之前的版本如果加上这个就会抛出
阅读全文
posted @ 2018-09-18 10:53 新际航
阅读(2434)
评论(0)
推荐(0)
2018年9月14日
presto——java.sql.SQLException: Error executing query与javax.net.ssl.SSLException: Unrecognized SSL message, plaintext connection?异常问题
摘要: 使用presto的时候以mysql为presto的数据源 安装的presto是0.95版本;使用的presto-jdbc是0.202的,这里使用jdbc去访问时候,connection可以链接成功,但是在执行excuteQuery时候抛出 java.sql.SQLException: Error e
阅读全文
posted @ 2018-09-14 18:47 新际航
阅读(4637)
评论(0)
推荐(0)
2018年9月6日
hive 2以上版本启动异常 Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
摘要: hive2.0以上的版本启动时 抛出 “Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient”异常 这是由于2以上版本要首先初始化源数据库可以使用如下命令初始化 然后再直接使用 hive
阅读全文
posted @ 2018-09-06 15:57 新际航
阅读(1203)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
7
···
9
下一页
公告