2018年3月23日
以elasticsearch-hadoop 向elasticsearch 导数，丢失数据的问题排查
摘要： 实际这是很久之前的问题了，当时没时间记录 这里简单回顾 项目基于 数据架构不方便说太细，最精简的 somedata-> [kafka]->spark-stream->elasticsearch 在 spark-streaming 引用了elasticsearch-hadoop(实际用的是为支持ups 阅读全文
posted @ 2018-03-23 18:10 cclient 阅读(3642) 评论(0) 推荐(2)
基于phathomjs token 不定时无响应问题排查
摘要： 问题描述 基于phathomjs的token池项目，基本原理是，打开淘宝页，获取匿名cookie,再由cookie中提取有效token，调用方通过该token获取淘宝数据 为方便基他人应用，封装了部分功能为一个http api 功能是完备的，问题是服务运行个一天左右，就无响应了 问题1，phatho 阅读全文
posted @ 2018-03-23 17:22 cclient 阅读(404) 评论(0) 推荐(1)