上一页 1 2 3 4 5 6 7 8 9 ··· 13 下一页

2022年11月29日

Sybase 插入语句的字段值有分隔符“'”的解决方案

摘要: 问题场景 往Sybase库插入数据的时候,有一个字段的值是要存入SQL语句,含有分隔符“’”,如何正确地插入语句? 解决方案 在字段... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(0) 评论(0) 推荐(0)

idea2017.2 使用scala进行编译报错 问题解决

摘要: 报错提示 Error:scalac: Error: Uninitialized object exists on backward ... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(102) 评论(0) 推荐(0)

hadoop hive 动态分区

摘要: 应用场景 突然业务有要求,要求将以前的每个月的数据进行抽取保存。如果只是单纯一条一条的执行,又太过于繁琐。作为程序员,这肯定不能忍。... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(18) 评论(0) 推荐(0)

“ error in shuffle in fetcher”的解决方案

摘要: 问题场景 使用hive进行数据的统计,发现数据进行到一半,就异常退出。查看了报错,是栈溢出,导致了异常。 问题分析 通过查找资料和查... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(49) 评论(0) 推荐(0)

Java多线程写文件

摘要: 问题场景 调用多个线程将多个文件进行合并,当初没有考虑到多线程操作文件会造成的脏数据,导致了业务出问题。 解决方法 审查文件操作的方... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(188) 评论(0) 推荐(0)

Linux 编辑环境变量的三种方式

摘要: 目的 编辑环境变量 方式 有3种方式进行编辑环境变量 1. 临时性 在控制台直接使用export命令即可。例如: expo... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(118) 评论(0) 推荐(0)

hive 如何去除两个表相同的部分

摘要: 问题场景 在项目开发当中,有时候需要配合用户出报表数据。这一部分是一个难题,因为数据量大,运行时间比较长,所以就需要慎重地写SQL,... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(89) 评论(0) 推荐(0)

Linux tar 打包排除某些文件夹

摘要: 场景 想要将以前的程序打包下来,但是发现有log日志,而且比较大,有几G大。 解决思路 打包的时候,将某些文件夹给排除掉,只打包自己... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(291) 评论(0) 推荐(0)

hive笔记

摘要: hive不支持修改表中数据,但是可以修改表结构,而不影响数据有local的速度明显比没有local慢在hive内执行Hadoop的d... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(17) 评论(0) 推荐(0)

hive 命令整理

摘要: 启动 hive 数据库操作 create database database_name; -- 新建数据库creat databas... 阅读全文

posted @ 2022-11-29 18:40 枫夜求索阁 阅读(58) 评论(0) 推荐(0)

上一页 1 2 3 4 5 6 7 8 9 ··· 13 下一页

导航