会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
可以看看你胖次吗
欲上九天揽月,纵然失败,仍与星辰同在!
管理
上一页
1
2
3
4
5
6
···
9
下一页
2020年10月20日
利用docker-compose 来构建Kafka集群操作即遇到的问题
摘要: 操作 https://www.cnblogs.com/Rostov/p/13530423.html https://blog.csdn.net/weixin_42831855/article/details/91980398 compose.yml 文件解析 https://www.cnblogs.
阅读全文
posted @ 2020-10-20 17:09 可以看看你胖次吗
阅读(625)
评论(0)
推荐(0)
2020年10月1日
spark sql 自定义常用工具函数
摘要: 时间差计算 /** * 根据用户今日学习,关卡状态,最近学习时间来判断是否跳课 * @author yangxu * @date 2020/9/28 5:53 下午 * @param isStudyToday 今日是否学习 * @param planStatus 关卡状态 * @param stud
阅读全文
posted @ 2020-10-01 16:30 可以看看你胖次吗
阅读(215)
评论(0)
推荐(0)
2020年9月27日
Maven 打包报错
摘要: 在使用Maven打包时报错 Failed to execute goal net.alchim31.maven:scala-maven-plugin:3.2.2:compile (default) on project dwd: wrap: org.apache.commons.exec.Execu
阅读全文
posted @ 2020-09-27 13:31 可以看看你胖次吗
阅读(977)
评论(0)
推荐(0)
2020年9月25日
Spark sql 中 窗口函数无法序列化报错 org.apache.spark.SparkException: Task not serializable
摘要: 参考链接:https://stackoverflow.com/questions/37301241/spark-task-not-serializable-with-lag-window-function https://www.cnblogs.com/aixing/p/13327364.html
阅读全文
posted @ 2020-09-25 17:51 可以看看你胖次吗
阅读(551)
评论(0)
推荐(0)
2020年8月29日
Hive 中 时间戳,字符串转换
摘要: 13位时间戳装换为日期格式的字符串 select from_unixtime( cast(1597651229344/1000 as int),'yyyy-MM-dd HH:mm:ss') 时间字符串比较大小 Mysql 使用函数:STR_TO_DATE(str, format) 使用示例:sele
阅读全文
posted @ 2020-08-29 15:01 可以看看你胖次吗
阅读(13708)
评论(0)
推荐(0)
2020年8月25日
Spark Submit的一些注意事项
摘要: 脚本示例 spark-submit --master yarn \ --packages org.yang.component:common:1.2.3-SNAPSHOT,com.cloudera.impala.jdbc:ImpalaJDBC41:2.5.41 \ --repositories ht
阅读全文
posted @ 2020-08-25 14:17 可以看看你胖次吗
阅读(557)
评论(0)
推荐(0)
2020年8月17日
SparkStreaming 结合Kafka 时丢数据
摘要: 问题: 从同一个Kafka里消费数据做一个WordCount,flink,Kafkaconsumer 得到的结果都是正常的,而我自己写的sparkstreaming 确跟正常数据量差了10倍左右 解决: 总结一句话:一定要听官网的话!!! http://spark.apache.org/docs/2
阅读全文
posted @ 2020-08-17 18:58 可以看看你胖次吗
阅读(460)
评论(1)
推荐(1)
Mac 开启22端口以便向服务器传输文件
摘要: 系统偏好设置->共享->远程登录
阅读全文
posted @ 2020-08-17 13:10 可以看看你胖次吗
阅读(845)
评论(0)
推荐(0)
Mac 安装科学软件的网站(搬运)
摘要: https://www.macwk.com/perfect
阅读全文
posted @ 2020-08-17 09:37 可以看看你胖次吗
阅读(477)
评论(0)
推荐(0)
Mac 安装HomeBrew 国内(传送门)
摘要: https://baijiahao.baidu.com/s?id=1668544039877443967&wfr=spider&for=pc
阅读全文
posted @ 2020-08-17 09:35 可以看看你胖次吗
阅读(237)
评论(0)
推荐(0)
2020年8月11日
一次 java.lang.NoClassDefFoundError 异常的解决
摘要: 抱这个错的原因有以下几点: 1.在于Java和Scala类共同使用,但是在maven打包配置里没有配置Java的编译插件,所以报错 附上打包链接 https://blog.csdn.net/tf461991046/article/details/80834685?utm_medium=distrib
阅读全文
posted @ 2020-08-11 21:25 可以看看你胖次吗
阅读(1991)
评论(0)
推荐(0)
SparkStreaming 在往hive里写数据时,读不懂hive的配置文件
摘要: 解决方案: 先创建sparkSession,然后再通过SparkSession去创建StreamingContext
阅读全文
posted @ 2020-08-11 18:29 可以看看你胖次吗
阅读(426)
评论(0)
推荐(0)
2020年8月10日
Spark SQL 建立 全局临时视图后,找不到该视图
摘要: https://stackoom.com/question/3v3NC/AnalysisException-%E6%89%BE%E4%B8%8D%E5%88%B0%E8%A1%A8%E6%88%96%E8%A7%86%E5%9B%BE-%E5%8D%B3%E4%BD%BF%E5%9C%A8%E6%8
阅读全文
posted @ 2020-08-10 17:25 可以看看你胖次吗
阅读(712)
评论(1)
推荐(1)
Spark on Hive 报错 java.lang.NoSuchFieldError: METASTORE_CLIENT_SOCKET_LIFETIME
摘要: https://blog.csdn.net/ct2020129/article/details/90695033 原因是 hive 依赖版本太低,需要升级为1.2.1 <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-j
阅读全文
posted @ 2020-08-10 16:08 可以看看你胖次吗
阅读(607)
评论(0)
推荐(0)
2020年8月6日
Idea 2020.2 一键破解
摘要: https://tech.souyunku.com/?p=16220 亲测有效 后续更新 今天又发现失效了,而且网上大部分需要传入安装参数的都不行,知道我发现了这个链接里面的公众号 ‘励志架构师’,它提供的资源是有效的(原谅我不能直接发百度云,毕竟别人也要吃饭) “idea下载地址及激活教程刚刚搞的
阅读全文
posted @ 2020-08-06 19:53 可以看看你胖次吗
阅读(8147)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
···
9
下一页
公告
Live2D