摘要:
一、jar包依赖 <dependency> <groupId>org.slf4j</groupId> <artifactId>slf4j-api</artifactId> <version>1.7.5</version> </dependency> <dependency> <groupId>ch. 阅读全文
摘要:
一、下载安装sealos wget https://github.com/fanux/sealos/releases/download/v3.2.0-beta.2/sealos && \ chmod +x sealos && mv sealos /usr/bin 注意:sealos建议在window 阅读全文
摘要:
地址:http://docs.kubernetes.org.cn/122.html 阅读全文
摘要:
一、环境 64位centos 二、安装 (1)关闭防火墙 systemctl stop firewalld systemctl disable firewalld (2)安装etcd与kubernetes(会自动安装docker) yum install -y etcd kubernetes (3) 阅读全文
摘要:
1.pom <dependency> <groupId>com.dyuproject.protostuff</groupId> <artifactId>protostuff-core</artifactId> <version>1.0.8</version></dependency> <depend 阅读全文
摘要:
<repositories> <repository> <id>alimaven</id> <name>aliyun maven</name> <url>http://maven.aliyun.com/nexus/content/groups/public/</url> </repository>< 阅读全文
摘要:
1.引用 <dependency> <groupId>com.rabbitmq</groupId> <artifactId>amqp-client</artifactId></dependency>2.代码 package cn.piesat.task.util;import com.rabbitm 阅读全文
摘要:
一.背景介绍 项目上进行算法调度的需求,打算采用kafka作为消息中间件,通过将多个算法消费者加入到同一个group中并行的处理算法请求,从而达到高效处理的目的。但是算法处理的时间较长,多则几十分钟,短的几分钟。测试的结果是算法时间过长的消费者会引发kafka的rebalance,消费者无法再消费到 阅读全文
摘要:
1.背景介绍:平台使用的华为FI C203的版本,通过SparkStreaming消费kafka数据后,进行算法处理入库。其中在算法部分耗时为4秒,每个批的数据量在30MB左右。执行算法部分的算子分区数据从50调大至150,发现算法部分时间开销仍然在4秒左右,并未提高。 2.调优手段: spark. 阅读全文
摘要:
以下是Dockerfile文件 FROM centos:7ENV LANG=zh_CN.UTF-8 \ LANGUAGE=zh_CN:zh \ LC_ALL=zh_CN.UTF-8 RUN yum update -y && \ yum reinstall -y glibc-common && \ y 阅读全文