会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
sunshineD
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
2021年12月27日
SVN基本操作
摘要: 一、SVN基本操作 (1)在指定文件夹下右键“SVN检出”项目到本地文件夹 (2)提交项目到SVN (3)SVN撤销和恢复 未提交文件直接右键“SVN还原” 已提交文件,右键“显示日志”-选择要恢复版本-“复原此版本作出的修改” 二、添加忽略 使用场景:某项目下不想提交某个文件或文件夹,可为文件或文
阅读全文
posted @ 2021-12-27 09:46 sunshineD
阅读(1934)
评论(0)
推荐(0)
2021年11月24日
Spark应用程序--num-executors,--execuor-cores和--executor-memory参数合理分配
摘要: https://blog.csdn.net/yolohohohoho/article/details/88056381
阅读全文
posted @ 2021-11-24 15:01 sunshineD
阅读(65)
评论(0)
推荐(0)
SQL语句执行顺序
摘要: https://blog.csdn.net/u014044812/article/details/51004754
阅读全文
posted @ 2021-11-24 14:47 sunshineD
阅读(12)
评论(0)
推荐(0)
Linux查看RAM内存信息
摘要: 1.查看/proc/meminfo文件 查看RAM使用情况最简单的方法是通过/proc/meminfo。这个动态更新的虚拟文件列出了详细的内存使用情况。 cat /proc/meminfo命令输出结果如下: 1 MemTotal: 131792736 kB 2 MemFree: 110845344
阅读全文
posted @ 2021-11-24 14:46 sunshineD
阅读(1326)
评论(0)
推荐(0)
Linux查看物理CPU个数、核数、逻辑CPU个数及CPU相关信息
摘要: # 总核数 = 物理CPU个数 X 每颗物理CPU的核数 # 总逻辑CPU数 = 物理CPU个数 X 每颗物理CPU的核数 X 超线程数 # 查看物理CPU个数 cat /proc/cpuinfo| grep "physical id"| sort| uniq| wc -l # 查看每个物理CPU中
阅读全文
posted @ 2021-11-24 14:17 sunshineD
阅读(27)
评论(0)
推荐(0)
2021年10月20日
Spark Streaming的Batch Duration优化
摘要: Spark Streaming 是微批处理。 SparkConf sparkConf = new SparkConf().setAppName("SparkStreaming").setMaster("local[*]"); JavaStreamingContext javaStreamingCon
阅读全文
posted @ 2021-10-20 10:45 sunshineD
阅读(264)
评论(0)
推荐(0)
2021年10月19日
Spark Streaming WebUI监控,查看Streaming Statistics,Batch(job stage task)
摘要: https://www.jianshu.com/p/506654cce9dc
阅读全文
posted @ 2021-10-19 11:10 sunshineD
阅读(105)
评论(0)
推荐(0)
2021年9月24日
hive中如何查询除了其中某个字段剩余所有字段
摘要: 想要将hive分区表中的某个分区复制到新的分区中,使用如下sql语句 insert overwrite table zcfw_sda.sda04_core_request_base_ratio_ifrs partition (etl_tx_dt = 20190327) select * from z
阅读全文
posted @ 2021-09-24 12:45 sunshineD
阅读(679)
评论(0)
推荐(0)
上一页
1
2
公告