摘要：
其实问题到现在为止也没有解决 因为服务是部署在k8s上，挂载的，偶发性的出现文件解析异常 bom头已经验证过了 手动重新解析这些文件完全正常，问题无法复现，文件本身并没有问题。 最后怀疑到了最不该怀疑的文件系统上面，k8s内解析的文件路径实际是pv,pvc映射的是glusterfs文件系统 可能是g 阅读全文
posted @ 2019-05-08 03:35
cclient
阅读(327)
评论(0)
推荐(0)
摘要：
舆情系统每日热词用到了lda主题聚类 原先的版本是python项目，分词应用Jieba,LDA应用Gensim 项目工作良好 有以下几点问题 1 舆情产品基于elasticsearch大数据,es内应用lucene分词，python的jieba分词和lucene分词结果并不一致(或需额外的工作保持一 阅读全文
posted @ 2019-03-25 08:49
cclient
阅读(914)
评论(0)
推荐(0)
摘要：
elasticsearch 滚动更新分词 国内用ik、hanlp、ansj或基于其二次开发的比较多 必然有分词变更的操作(主要是是加词) reindex+别名可以解决一部分问题，但在大集群上会影响业务 elasticsearch写入数据时会对原始数据作分词，检索时会对查询条件作分词，以两次的分词算匹 阅读全文
posted @ 2019-03-02 15:13
cclient
阅读(516)
评论(0)
推荐(0)
摘要：
照着官方文档来，不过在mac下还是有些小坑 对熟悉c++的人来说很小儿科，但对c++相对比较外行 (只知道基本语法和部分数据结构)的人，还是作不到开箱即用 首先编译```If you need to enable cpu/heap profilers in examples: brew instal 阅读全文
posted @ 2019-03-02 14:50
cclient
阅读(2757)
评论(0)
推荐(0)
摘要：
openvpn 安卓客户端升级后报错 "ifconfig-pool" option use a /30 subnet topology net30 连接失败 服务端没有任何变化 同样的配置文件，在mac上Tunnelblick连接成功，在android 上 openvpn 报错 错误内容为 `EVE 阅读全文
posted @ 2019-03-02 14:44
cclient
阅读(135)
评论(0)
推荐(0)
摘要：
项目细节也就不说了 kafka + spark streaming >> kafka版本1.0，spark streaming也是依照kafka1.0开发的 这个kfk集群叫kfk_1.0吧 包括kafka在内的集群资源都是个人维护的 目前有一个情况是要从另一个kafka集群版本0.8.1,叫kfk 阅读全文
posted @ 2019-03-02 14:41
cclient
阅读(3031)
评论(0)
推荐(0)
摘要：
ubuntu 深度学习cuda环境搭建 ubuntu系统版本 18.04 查看GPU型号(NVS 315 性能很差,比没有强) 首先最好有ssh服务,以下操作都是远程ssh执行 lspci | grep -i nvidia03:00.0 VGA compatible controller: NVID 阅读全文
posted @ 2019-03-02 14:39
cclient
阅读(6430)
评论(0)
推荐(0)
摘要：
kubernetes 新加了个node，状态Ready,但调度过去的任务，都执行异常 查看异常节点日志 `Error adding net work: open run/flannel/subnet.env no such file or directory` flannel 有问题 环境里flan 阅读全文
posted @ 2019-03-02 14:35
cclient
阅读(9006)
评论(0)
推荐(0)
摘要：
logstash nested内嵌字段 field protobuf解码 codec 的解决办法 主要需求 logstash-codec 下https://www.elastic.co/guide/en/logstash/6.3/codec-plugins.html此类解码器 只能应用在原始数据上比 阅读全文
posted @ 2018-12-06 19:23
cclient
阅读(1262)
评论(0)
推荐(0)
摘要：
https://github.com/cclient/sequelize-shardinghttps://www.npmjs.com/package/sequelize-sharding 实际有效的代码就几行，主要时间都花在这篇博客和readme.md上 ———————————————— 公司里有n 阅读全文
posted @ 2018-11-24 12:54
cclient
阅读(2766)
评论(2)
推荐(0)
浙公网安备 33010602011771号