HEU-zcy

摘要： 持续创作，加速成长！这是我参与「掘金日新计划 · 10 月更文挑战」的第3天，点击查看活动详情 本次将讲述一个完整的需求交付周期内的工作，介绍常见的研发模式和迭代流程。 基础知识认知： 分类英文中文解释研发模式Waterfall Model瀑布模型瀑布模型（Waterfall Model）最早强调软 阅读全文

摘要： 持续创作，加速成长！这是我参与「掘金日新计划 · 10 月更文挑战」的第2天，点击查看活动详情 首先对于ORM： Object-Relationl Mapping，即对象关系映射，这里的Relationl指的是关系型数据库 它的作用是在关系型数据库和对象之间作一个映射，这样，我们在具体的操作数据库的 阅读全文

摘要： 持续创作，加速成长！这是我参与「掘金日新计划 · 10 月更文挑战」的第1天，点击查看活动详情 课前知识储备： 数据库、SQL 什么是数据库和SQL？ - 知乎 (zhihu.com) 使用Database/sql建立连接、使用 DSN： （数据源名称）Data source name 数据源名称具 阅读全文

摘要： 参加两届青训营后，一直在字节积极的学习氛围中成长，面对大学生活已经过半，自己的习惯却仍有许多不足，寄希望于flag打卡群，曾有21天养成一个好习惯，精于勤而荒于嬉，相信这100天的坚持可以改掉许多坏习惯，养成越来越多的好习惯，做一个阳光健康的自己。 目标（100天） 每天锻炼（上肢锻炼，核心锻炼等等 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第15天 关键设计 分布式存储系统的基本概念 容错能力：能够处理绝大部分异常场景，例如服务器宕机、网络异常、磁盘故障、网络超时等。 一致性模型：为了实现容错，数据必须多副本存放，一致性要解决的问题是如何保障这多个副本的内容都是一致的 可扩展性：分布式存储系 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第14天 架构原理 HDFS组件 三大组件 Client/SDK:即从某台机器访问，该机器为Client，例如命令行，其次就是SDK（程序会通过SDK访问HDFS） Namenode（HDFS的中枢结点）负责元数据管理 datanode（所有用户的数据，最 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第13天 前阔 了解HDFS的使用场景，尤其是在大数据场景中的常规应用，同时也了解HDFS在其它场景的一些应用，加深对存储系统应用场景的理解。 了解HDFS的设计与实现，包括基本功能、运维体系等，对生产环境里分布式存储系统体系化建设有进一步认知。 抽象总结 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第12天 数据流和动态表 如何在数据流上执行SQL语句，说明流式处理中状态的概念 随处可见的流式数据 传统SQL和流处理 概述-数据流和动态表转换 在流上定义表 下图显示了单击事件流(左侧)如何转换为表(右侧)。当插入更多的单击流记录时，结果表将不断增长。 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第11天 Flink支持OLAP场景 Flink做OLAP的优势 OLAP场景的挑战 Flink OLAP架构现状 Client:提交SQL Query; Gateway 接收Client提交的SQL Query，对 SQL进行语法解析和查询优化，生成 F 阅读全文

摘要： 这是我参与「第四届青训营 」笔记创作活动的的第10天 小总结 经过相应的改造和优化之后，Flink在架构设计上，针对 DataStream层、调度层、Shuffleservice层，均完成了对流和批的支持。 至此，业务已经可以非常方便地使用Flink解决流和批场景的问题了。 Flink 架构优化 流 阅读全文