摘要: 一.系统总体设计 需求:以提供数据为主的服务性平台,建立数据湖以备后用 二.存储实现 需求分析:不仅解决存储,还要考虑数据管理,对外服务及省钱 以天翼云为例:使用obs产品,开通cdn服务,可以使数据服务效率很高,且同时使用天翼云服务器,则数据为内网传输,成本可降至很低 通过systemd+ pyt 阅读全文
posted @ 2025-07-11 17:06 江湖一支竹 阅读(5) 评论(0) 推荐(0)
摘要: 命令排查方法:1.pid:ps -ef | grep java 或jps2.内存及gc情况:jstat -gc pid3.dump文件:jmap -dump:format=b,file=heapdump.hprof <PID>4.分析文件:jhat heapdump.hprof,访问ip:7000查 阅读全文
posted @ 2025-07-09 16:20 江湖一支竹 阅读(14) 评论(0) 推荐(0)
摘要: I hope we can work together to build an enterprise with vision and culture, a highly cohesive, efficient and warm team, a user - friendly and creative 阅读全文
posted @ 2025-07-09 14:42 江湖一支竹 阅读(9) 评论(0) 推荐(0)
摘要: sql执行实例:mysql -u root -p密码 开发库 < 2025-04-27-alter-sys-user.sql 导库操作步骤:拷贝测试mysql:mysqldump -u root -p --databases 开发库 > back.sqlmysqldump -u root -p -- 阅读全文
posted @ 2025-07-09 09:44 江湖一支竹 阅读(26) 评论(0) 推荐(0)
摘要: 一.数据准备 1.爬虫定时下载数据并校验重新下载 2.数据处理 3.本地数据管理 二.数据上传 1.依赖华为obs python库 2.ak sk 定制化上传策略--通过配置表,利用多进程并发方式,同时上传 多个桶的数据 # -*- encoding: utf-8 -*-import hashlib 阅读全文
posted @ 2025-07-07 14:53 江湖一支竹 阅读(29) 评论(0) 推荐(0)
摘要: 一.快速清理本地仓库的文件 1.lastUpdated2._remote.repositories3._maven.repositories4.空文件夹 二.相关配置文件1.pom.xml2.settings.xml3.默认 开源中心库 三.访问顺序1.本地库,idea中配置2.pom和settin 阅读全文
posted @ 2025-06-26 14:41 江湖一支竹 阅读(5) 评论(0) 推荐(0)
摘要: 一.网络结构 1.卫星地面站 :与陆地连接,接受/转发到陆上用户 2.网络协调站 :信道分配,数据路由等 3.空间站(即卫星站):信号转发 4.卫星船站 :船上接受 二:点对点--有接受成功确认,明确发送对象 1.地面发出连接请求(指定船舶标识号如MMSI等)给网络协调站 2.网络协调站根据请求,到 阅读全文
posted @ 2025-06-09 16:16 江湖一支竹 阅读(30) 评论(0) 推荐(0)
摘要: 初步断定为 启动服务时,自定义了内存配置(-XX:MetaspaceSize=512m -XX:NewSize=1024m -XX:OldSize=2048m ...),导致服务运行一段时间,内存判断有误,自动关闭服务,待验证 初步验证:java -XX:+PrintGCDetails -XX:+P 阅读全文
posted @ 2025-06-03 10:28 江湖一支竹 阅读(10) 评论(0) 推荐(0)
摘要: 一.分治:将长数组一分为二,大的分成小的,再每个小的里面操作 1.快排(自我推荐),竟然敢取这么吊的名字,说明一定会有它的牛b之处 过程:先选择分割位,再进行分割,在选择分割位的时候,实际上就在排序了,当分割完成,排序即完成;从上到下一步到位 步骤: 1.左右边界判断,left<=right,ret 阅读全文
posted @ 2025-05-31 14:55 江湖一支竹 阅读(7) 评论(0) 推荐(0)
摘要: 服务器配置低需要升级,具体升级到什么程度: 一:系统级监控--查看资源使用情况 1.cpu使用率 2.内存使用率 二:应用级分析--定位代码瓶颈 1.接口--通过日志记录事件 2.线程与锁分析-通过jstack <pid>,若runnable多且cpu高,则属于计算密集型;若blocked/wait 阅读全文
posted @ 2025-05-23 16:13 江湖一支竹 阅读(7) 评论(0) 推荐(0)