上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 21 下一页
摘要: Local模式 Standalone模式(使用Spark自带的内置集群管理器) YARN模式(使用YARN作为集群管理器) Mesos模式(使用Mesos作为集群管理器) spark-shell --master <master-url> 单机 local 使用一个Worker线程本地化运行SPAR 阅读全文
posted @ 2020-11-27 16:18 jason47 阅读(169) 评论(0) 推荐(0)
摘要: 两种方式 一、与程序集成 1.1与spring boot集成 可以根据需要添加依赖,都会自动添加spark-core <!-- spark-streaming scala version:2.12--> <dependency> <groupId>org.apache.spark</groupId> 阅读全文
posted @ 2020-11-25 17:12 jason47 阅读(368) 评论(0) 推荐(0)
摘要: spark的版本如下 1. 版本历史中的下载文件 SparkR是R语言的版本 spark-bin-hadoop 包含hadoop;包含默认的scala版本(spark基于scala,scala基于jvm) spark-bin-without-hadoop 不包含hadoop,需要用户自己单独安装ha 阅读全文
posted @ 2020-11-18 16:35 jason47 阅读(1272) 评论(0) 推荐(0)
摘要: 业务背景这次分享主要是围绕 Redis,分享在平时的日常业务开发中遇到的 9 个经典案例,希望通过此次分享可以帮助大家更好的将 Redis 的高级特性应用到日常的业务开发中来。 首先介绍一下业务背景:总用户量大概是 5亿左右,月活 5kw,日活近 2kw 。服务端有 1000 多个 Redis 实例 阅读全文
posted @ 2020-10-26 15:16 jason47 阅读(914) 评论(0) 推荐(0)
摘要: https://mp.weixin.qq.com/s/lmDHHk8lhsvmx242YlH7bA 1. 命令行 不知道大家在日常操作redis时用什么可视化工具呢? 以前总觉得没有什么太好的可视化工具,于是问了一个业内朋友。对方回:你还用可视化工具?直接命令行呀,redis提供了这么多命令,操作起 阅读全文
posted @ 2020-10-26 15:05 jason47 阅读(696) 评论(0) 推荐(0)
摘要: mysql -u root -p --default-character-set=utf8 use dbname source /root/newsdata.sql 阅读全文
posted @ 2020-10-16 18:42 jason47 阅读(80) 评论(0) 推荐(0)
摘要: 配置密码 sudo mysql -uroot use mysql; select host,user,authentication_string from user; alter user 'root'@'localhost' identified with mysql_native_passwor 阅读全文
posted @ 2020-09-23 13:44 jason47 阅读(102) 评论(0) 推荐(0)
摘要: 1. 使用thymeleaf如果访问接口仍然带上ip:port的话,还是会跨域 2. 创建Filter类 import java.io.IOException; import javax.servlet.Filter; import javax.servlet.FilterChain; import 阅读全文
posted @ 2020-09-17 17:43 jason47 阅读(118) 评论(0) 推荐(0)
摘要: 方式一 1.进入目录/etc/mysql/mysql.conf.d 2.编辑mysqld.conf将bind项改成0.0.0.0 3.进入mysql -uroot -p use mysql; select host,user,authentication_string from user; CREA 阅读全文
posted @ 2020-09-16 18:49 jason47 阅读(310) 评论(0) 推荐(0)
摘要: 本地仓库(.m2) vs. 远程仓库(联网) 运行Maven的时候,Maven所需要的任何构件都是直接从本地仓库获取的。如果本地仓库没有,它会首先尝试从远程仓库下载构件至本地仓库, 然后再使用本地仓库的构件。如果尝试过所有远程仓库之后,Maven还是没能够下载到该文件,它就会报错。 Maven缺省的 阅读全文
posted @ 2020-07-08 16:04 jason47 阅读(2541) 评论(0) 推荐(0)
上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 21 下一页