在苏州的城边

volcano测试用例实验笔记(二)-paddlepaddle

摘要： paddlepaddle简介飞桨(PaddlePaddle)是百度于 2016 年 9 月开源的深度学习框架，旨在提供一款安全高效、灵活易用、可扩展的深度学习平台。 2018 年 10 月，飞桨团队发布 Paddle Fluid 1.0 版本，对神经网络描述、大规模分布式训练、高性能推理引擎等核心阅读全文

posted @ 2021-07-20 15:00 在苏州的城边阅读(207) 评论(0) 推荐(0)

centos7.9配置mongo-cxx-driver笔记

摘要：项目需求中，需要在centos服务器下使用高级语言c++操作mongoDB数据库，因此需要进行环境的配置，踩了两天的坑，这里简单的记录一下收获总结。 mongo-cxx-driver的配置主要分为如下几个步骤 0.centos下配置mongoDB 1.mongo-c-driver的安装配置 2.c+ 阅读全文

posted @ 2021-04-11 21:00 在苏州的城边阅读(531) 评论(0) 推荐(0)

volcano测试用例实验笔记(一)-flink

摘要：在CNCF:community bridge#1285Reading Material Update And Supplement的议题中，我们需要提供volcano支持北向框架的测试用例，这篇笔记主要用来记录实验环境的搭建和实验过程中踩的坑。 CCE环境部署部署k8s(注意要分配公网ip) 安装阅读全文

posted @ 2021-04-03 20:47 在苏州的城边阅读(708) 评论(0) 推荐(0)

如何为开源项目提交pr

摘要：在CNCF:community bridge#1285Reading Material Update And Supplement 这个议题当中，更新扩充好的材料需要同步更新到volcano官网的官方文档上，这篇文章主要来记录如何为开源项目(volcano)提交pr，以达到我们将贡献的开源文档同步更阅读全文

posted @ 2021-04-03 20:44 在苏州的城边阅读(300) 评论(0) 推荐(0)

volcano之job plugins

摘要： K8s pod pod是kubernetes中可以创建和部署的最小也是最简单的单位。pod代表集群中运行的进程。在k8s集群中，pod有两种使用方式一个pod运行一个容器：单个容器的封装，但是k8手、管理的是pod而不是容器。这也是最常见的用法。一个pod运行多个容器：一个pod中同时封装几个阅读全文

posted @ 2021-03-30 21:42 在苏州的城边阅读(677) 评论(0) 推荐(0)

volcano调度器源代码走读plugins篇

摘要： Gang 简介 Gang调度策略是volcano-scheduler的核心调度算法之一，它满足了调度过程中的“All or nothing”的调度需求，避免Pod的任意调度导致集群资源的浪费。具体算法是，观察Job下的Pod已调度数量是否满足了最小运行数量，当Job的最小运行数量得到满足时，为Job 阅读全文

posted @ 2021-03-16 22:17 在苏州的城边阅读(1736) 评论(0) 推荐(0)

CNCF:community bridge#1285Reading Material Update And Supplement

摘要： CNCF是linux foundation下的子组织，都是推动开源的非盈利组织，关于linux foundation这个面向大学生的coding实训，后面我会继续做详细介绍，这里记录我作为春季赛季的实习生，参与的议题。所有选题list： https://github.com/cncf/mentor 阅读全文

posted @ 2021-03-11 10:49 在苏州的城边阅读(140) 评论(0) 推荐(0)

OLAP、OLTP概念解读

摘要：最近投校招发现阿里云的数据库内核有很多组：polarDB、Tair、OLAP大组等，内推师兄说polarDB、Tair是OLTP大组下面的。忽然想起来之前在看openGauss的时候解除过OLAP、OLTP的概念，但是记得不真切了，因此这里再次详细的记录一下。整体概念：数据处理大致可以分成两大类阅读全文

posted @ 2021-03-06 10:55 在苏州的城边阅读(830) 评论(0) 推荐(0)

volcano调度器源代码走读actions篇

摘要： Enqueue Queues QueueMap jobsMap //扫描一遍job，初始化上面三个数据结构 For job in ssn.Jobs //过滤1 found := ssn.Queues[job.Queue] existed := queueMap[queue.UID] //过滤2 if 阅读全文

posted @ 2021-03-04 10:47 在苏州的城边阅读(891) 评论(0) 推荐(0)

存储引擎

摘要：写在前面：这个专栏主要用来记录读《openGauss数据库核心技术》、《数据库系统实现》这两本书记录的一些问题。属于自制索引目录:P。这篇是《openGauss数据库核心技术》的存储技术这一章的内容。 Q1:关系型数据库存储引擎要解决的三大问题？ Q2:openGauss有哪些存储引擎？ Q3:OL 阅读全文

posted @ 2021-01-23 19:11 在苏州的城边阅读(134) 评论(0) 推荐(0)