牛皮糖比

2020年4月30日

摘要： DStream接收socket数据统计安装并启动生产者 #在linux系统上安装nc工具，利用它向某个端口发送数据 yum -y install nc #执行发送数据命令 nc -lk port 执行streaming依赖 <dependency> <groupId>org.apache.spar 阅读全文

posted @ 2020-04-30 18:28 牛皮糖比阅读(192) 评论(0) 推荐(0)

sparkStreaming架构讲解

摘要：阅读全文

posted @ 2020-04-30 18:04 牛皮糖比阅读(119) 评论(0) 推荐(0)

2020年4月29日

flume集成配置和练习

摘要：一、练习目标 1.Flume.监控/tmp/logs/update.log文件 2.创建日志生成的脚本，写入/tmp/logs/update.log。 3.Flume捕获数据 4.将捕获的数据，推送到消息队列kafka 5.在Kafka模拟数据消费二、流程 1.解压并安装flume tar -zx 阅读全文

posted @ 2020-04-29 12:23 牛皮糖比阅读(249) 评论(0) 推荐(0)

2020年4月28日

kafka安装流程和测试

摘要： 1.上传文件到3台服务器下载路径：http://kafka.apache.org/downloads 2.添加环境变量 vi /etc/profileKAFKA_HOME=/opt/software/kafka_2.11-0.10.1.0PATH=$PATH:$KAFKA_HOME/binsour 阅读全文

posted @ 2020-04-28 19:24 牛皮糖比阅读(282) 评论(0) 推荐(0)

2020年4月23日

spark分析点击流日志数据

摘要：日志数据样式 101.226.167.227 - - [18/Sep/2013:19:49:10 +0000] "GET /29171365/ HTTP/1.1" 302 161 "http://www.leonarding.com/29171365/" "Mozilla/4.0 (compatib 阅读全文

posted @ 2020-04-23 17:38 牛皮糖比阅读(285) 评论(0) 推荐(0)

2020年4月18日

海洋cms对接微信公众号

摘要：对接公众号的功能在后台有 1.后台->系统->微信公众号设置根据自己的信息修改，并点击确定 2.打开https://mp.weixin.qq.com/，登录，点击开发->基本配置 url:域名/weixin/ token:weixin 3.启动参考： http://www.buyunw.com/ 阅读全文

posted @ 2020-04-18 17:46 牛皮糖比阅读(564) 评论(0) 推荐(0)

2020年4月17日

海洋cms设置缓冲页广告和定时任务采集，手机端可以显示的对联广告

摘要： 1.设置缓冲广告播放视频前的广告准备内容，放在模板的同一个文件夹中 gif动态图缓冲广告html模板缓冲html <!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <link rel="stylesheet" type 阅读全文

posted @ 2020-04-17 22:13 牛皮糖比阅读(875) 评论(0) 推荐(0)

2020年4月16日

scala的安装和idea上的第一个scala程序

摘要： scala安装下载地址 https://www.scala-lang.org/download/ 下载msi，点击安装，指定安装目录，安装完毕验证 cmdscala -v 使用 #进入scalascala#退出:q idea上的第一个scala程序准备工具 ideascala插件插件链接 h 阅读全文

posted @ 2020-04-16 19:34 牛皮糖比阅读(211) 评论(0) 推荐(0)

2020年4月15日

es学习第一步

摘要： 1. es基础 1.1 es定义 Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口 es相当于数据库，没有数据格式约束。 1.2 ES数据架构的主要概念（与关系数据库Mysql对比）（1）关系型数据库中的数据库阅读全文

posted @ 2020-04-15 22:52 牛皮糖比阅读(804) 评论(0) 推荐(0)

2020年4月14日

如何添加自定义中文分词的规则

摘要：以ik中文分词为例 ik:中文分词的插件，帮助查询，提高数据匹配的关联性进入es的插件安装目录,和ik插件配置目录新建一个xxx.dic文件，并保存中文打开ik.cfg.xml，添加指定文件 <entry key="ext_dict">xxx.dic</entry> 重启es即可文件说明阅读全文

posted @ 2020-04-14 20:46 牛皮糖比阅读(315) 评论(0) 推荐(0)

公告