会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
sir6
博客园
首页
新随笔
联系
订阅
管理
2023年4月19日
hbase运维
摘要: 1、hbase集群服务器重启可能导致dfs进入保护模式,日志如下: Waiting for dfs to exit safe mode 手动离开保护模式:hadoop dfsadmin -safemode leave 2、服务器重启导致hadoop数据块缺失,日志如下: There are 3 mi
阅读全文
posted @ 2023-04-19 11:55 sir6
阅读(40)
评论(0)
推荐(0)
2020年5月14日
mapbox雪碧图生成的坑
摘要: 说起mapbox的雪碧图,估计大都数人搜索到的是sprite-cli。 现在网上找一堆关于sprite的资料,结果发现这个东西的安装实在是麻烦的不得了(安装过程自知),需要一堆的环境支持,到了最后终于安装成功了却发现生成的雪碧图居然没有颜色,funk,浪费我N久的时间。没办法谁让俺是程序员,就喜欢折
阅读全文
posted @ 2020-05-14 19:58 sir6
阅读(671)
评论(0)
推荐(0)
2020年1月8日
redis超大key的定时任务设计
摘要: 如果遇到一个上百万的key需要做定时任务扫描处理改怎么办呢? 1、菜鸟做法是直接使用key *命令,其实这种做法在生产上是不被允许的,key * 会扫描整个redis库,频繁的扫库会导致redis压力过大而崩溃; 2、一般的程序员知道使用hashset,不用对整个redis库,但如果key值过大每次
阅读全文
posted @ 2020-01-08 10:55 sir6
阅读(297)
评论(0)
推荐(0)
2020年1月7日
迁移hbase表并进行zstd压缩
摘要: 1、选择hadoop3.1.1(https://pan.baidu.com/s/1UFHq6dxoh5AiqO_cd85NTw编译后的文件)hbase2.1.7下载源码并编译 2、创建zstd包的软连接 ln -s /usr/lib64/libzstd.so /usr/local/hadoop/li
阅读全文
posted @ 2020-01-07 20:59 sir6
阅读(662)
评论(0)
推荐(0)
容易忽略的long类型
摘要: 大都数码农在书写时间戳的long类型时,习惯用1000*60*60*31*12的表达式,记得的可能会加上一个1000*60*60*31*12l,但抱歉这是个错误的表达式,因为1000*60*60*31可能就已经是Integer型数据溢出了,导致后面的数字怎么相乘或者加上l都是负数
阅读全文
posted @ 2020-01-07 20:41 sir6
阅读(150)
评论(0)
推荐(0)
公告