随笔分类 -  大数据 / spark

摘要:一 ,错误: spark报:too many open files 打开文件过多的意思 ​ ulimit -a 查看打开的连接限制 ulimit -n 4096 扩大最大允许打开的文件数量设置为4096(临时的,重启后会还原) 修改系统配置文件(重启生效):vim /etc/security//li 阅读全文
posted @ 2021-04-21 14:32 憨憨青年 阅读(301) 评论(0) 推荐(0)
摘要:package com.lg.blgdata.utils import redis.clients.jedis.{Jedis, JedisPool, JedisPoolConfig} import scala.collection.mutable.HashSet //jedis连接池 object 阅读全文
posted @ 2021-01-21 11:52 憨憨青年 阅读(328) 评论(0) 推荐(0)
摘要:package com.lg.blgdata.utils import java.util.Properties import com.alibaba.druid.pool.DruidDataSourceFactory import javax.sql.DataSource import java. 阅读全文
posted @ 2021-01-21 11:51 憨憨青年 阅读(379) 评论(0) 推荐(0)

// 侧边栏目录 // https://blog-static.cnblogs.com/files/douzujun/marvin.nav.my1502.css