随笔分类 -  stream computing

摘要:一、内存构成详解 组成部分 配置参数 描述 框架堆内存(Framework Heap Memory) taskmanager.memory.framework.heap.size 用于 Flink 框架的 JVM 堆内存(进阶配置)。 任务堆内存(Task Heap Memory) taskmana 阅读全文
posted @ 2021-07-20 10:19 xmalll 阅读(1197) 评论(0) 推荐(0)
摘要:使用腾讯云环境,为减少重复工作量,将基础环境准备记录一下 一、环境需求 python: 3.7 pip cmake >= 3.6 java 1.8 maven >=3.3.0 二、Java 1. 下载 https://www.oracle.com/java/technologies/javase/j 阅读全文
posted @ 2021-03-29 09:54 xmalll 阅读(169) 评论(0) 推荐(0)
摘要:一、环境变量配置 1 #vim ~/.bashrc 2 export STREAM_HOME=/home/stream 3 export JAVA_HOME=$STREAM_HOME/jdk1.8.0_271 4 export CLASSPATH=.:$JAVA_HOME/lib/ 5 export 阅读全文
posted @ 2020-11-20 15:03 xmalll 阅读(696) 评论(0) 推荐(0)
摘要:一、启动 1.zookeeper后台启动 nohup bin/zookeeper-server-start.sh config/zookeeper.properties & 2.kafka后台启动 nohup bin/kafka-server-start.sh config/server.prope 阅读全文
posted @ 2020-11-04 11:12 xmalll 阅读(109) 评论(0) 推荐(0)
摘要:引子就算是浩哥布置的一个假期小任务吧,你会向别人如何安利Flink? 前前后后学习了半个来月Flink的相关知识,我大概能算是一只脚迈进大门了吧,哈哈~ 一、初中班主任反复说,要“透过现象看本质” Flink,其实就是一个魔法管道,各式各样的原始数据从管道一段流入,经过“24k magic”,从管道 阅读全文
posted @ 2020-10-06 10:36 xmalll 阅读(191) 评论(0) 推荐(0)