随笔分类 - 工作经验分享
摘要:链路追踪traceId 参考文档 https://developer.aliyun.com/article/976628 内容
阅读全文
摘要:业务日志打印规范 参考文档 Java开发手册 https://github.com/alibaba/p3c 内容 【强制】应用中不可直接使用日志系统(Log4j、Logback)中的 API,而应依赖使用日志框架 (SLF4J、JCL--Jakarta Commons Logging)中的 API,
阅读全文
摘要:Record 故障现象 flink同步hive到ck的数据同步不完整 告警日志 flink 任务运行日志: ```log 2023-03-01 05:21:08,021 INFO org.apache.flink.runtime.executiongraph.ExecutionGraph [] -
阅读全文
摘要:漏洞修复(主要为版本漏洞) 1. 扫描报告 顺序:高危 -> 中危 (大版本升级可解决多漏洞,可多次扫描) springboot项目**统一软件包版本**,maven项目引入,便于管理 2. 常见漏洞 fastjson 1.2.83 <dependency> <groupId>com.alibaba
阅读全文
摘要:阅读源码技巧 转载于 https://baijiahao.baidu.com/s?id=1712096392024186044&wfr=spider&for=pc 优秀的程序员一定会阅读很多源码,阅读源码也是有很多技巧的。 通常,根据他人总结的项目文档,先看整体(目录和类图)再看局部(类和函数)。对
阅读全文
摘要:NoSuchMethodError异常 问题描述 修复大数据组件包包中的漏洞,将hive-common 3.1.2版本升级到3.1.3,导致在连接hive表,查询schema时出现NosuchMethodError异常。 报错堆栈信息如下: 2023-02-24 14:48:00.931 [ERRO
阅读全文
摘要:如何有效地报告 Bug 作者:Simon Tatham 专业的自由软件程序员 翻译:Dasn [ English | Português | 简体中文 | Česky | Dansk | Deutsch | Español | Français | Magyar | Italiano | 日本語 |
阅读全文
摘要:用通俗易懂的大白话讲解Map/Reduce原理 用通俗易懂的大白话讲解Map/Reduce原理 2014年03月31日 16:20:44 阅读数:150434 2014年03月31日 16:20:44 阅读数:150434 阅读数:150434 Hadoop简介Hadoop就是一个实现了Google
阅读全文
摘要:https://blog.csdn.net/Regan_Hoo/article/details/78802897
阅读全文
摘要:elasticsearch 与 传统数据库的区别与选用 1:ES ElasticSearch是一款分布式全文检索框架,底层基于基于Lucene实现。 ElasticSearch 使用 JSON 格式存储数据,属于文档存储 2:遍历方式 ES有分片的概念,一个大的索引会被分成多个分片来进行存储数据,使
阅读全文
摘要:随着大数据应用的逐步普及,越来越多的大数据分析、内容安全审计和业务应用可视化的应用得到普及,这个过程中我们面临的一个核心问题那就是:如何把业务流量正确、按需的方式传递给所需的分析系统。 如何把业务流和或者所需的数据包分发到分析系统,实现方式有很多,既有传统的例如HUB、分光器和普通交换机的镜像技术,
阅读全文
摘要:linux学习路线 来自公众号:达内Linux云计算培训 运维学习需要分为四个阶段,linux初级入门-àlinux中级进阶-àlinux高级提升,和资深方向细化。 第一阶段:初级入门 初级阶段需要把linux学习路线搞清楚,任何学习都是循序渐进的,所以学linux也是需要有一定的路线。 个人建议学
阅读全文

浙公网安备 33010602011771号