JackYang - 博客园

2014年9月18日

sql2005镜像实现

摘要： -- -- 无论是主体服务器、镜像服务器, 还是见证服务器 -- 除特别说明外，均需要保证下面的操作在master库中执行 USE master GO -- --（1）建立镜像主体数据库 -- 此操作主体服务器上执行 -- a. 建立测试数据库 CREATE DATABASE DB_Mirror 阅读全文

posted @ 2014-09-18 14:53 JackYang 阅读(2679) 评论(0) 推荐(0)

CMMI集谈

摘要： SEPG(Software Engineering Process Group)是软件工程过程组的缩写，指由软件过程专家组成的团队，负责在软件组织内推动和促进软件过程改进。最早在CMM中提出，1990年发布的CMU/SEI-90-TR-024 《Software Engineering Proces 阅读全文

posted @ 2014-09-18 14:53 JackYang 阅读(3253) 评论(0) 推荐(0)

镜像

摘要：一、镜像简介 1、简介数据库镜像是将数据库事务处理从一个SQL Server数据库移动到不同SQL Server环境中的另一个SQL Server数据库中。镜像不能直接访问;它只用在错误恢复的情况下才可以被访问。要进行数据库镜像所需的最小需求包括了两个不同的SQL Server运行环境。主服阅读全文

posted @ 2014-09-18 14:52 JackYang 阅读(2717) 评论(0) 推荐(0)

ping

摘要：何为ping？是DOS命令，一般用于检测网络通与不通，也叫时延，其值越大，速度越慢 PING (Packet Internet Grope)，因特网包探索器，用于测试网络连接量的程序。Ping发送一个ICMP回声请求消息给目的地并报告是否收到所希望的ICMP回声应答。它是用来检查网络是否通畅或阅读全文

posted @ 2014-09-18 14:48 JackYang 阅读(3036) 评论(0) 推荐(0)

微服务架构中的数据库设计

摘要： 1. 简介微服务架构在不断发展。它带来了很多好处，尤其是相对于过时的单体架构。另一方面，使用微服务开发项目时存在多种挑战。最重要的问题之一是数据库设计。在数据设计方面，有两个关键问题。如何组织数据以及在哪里存储数据？在本教程中，我们将尝试回答它们。 2. 每个服务的数据库使用微服务体系结构时，阅读全文

posted @ 2014-09-18 14:33 JackYang 阅读(3283) 评论(0) 推荐(0)

Apache Hadoop HDFS 架构

摘要： HDFS(Hadoop Distributed File System)是Hadoop核心组成之一，是分布式计算中数据存储管理的基础，被设计成适合运行在通用硬件上的分布式文件系统。是一个块结构的文件系统，其中每个文件被划分为预定大小的块。这些块存储在一台或多台计算机的集群中。 HDFS可以部署在支持阅读全文

posted @ 2014-09-18 14:17 JackYang 阅读(2744) 评论(0) 推荐(0)

Spark源代码分析——谈RDD和依赖关系

摘要：我们知道RDD在Spark中是一个特别重要的概念。可以说，Spark的所有逻辑都需要依赖RDD。在本文中，我们简要讨论了Spark中的RDD。Spark中RDD的定义如下： abstract class RDD[T: ClassTag]( @transient private var _sc: Sp 阅读全文

posted @ 2014-09-18 13:51 JackYang 阅读(3292) 评论(0) 推荐(0)

Spark 高级：RDD 使用

摘要： Spark 提供了数据的核心抽象，称为弹性分布式数据集（RDD）。此数据集的全部或部分可以缓存在内存中，并在多次计算期间重复使用。RDD实际上是一个分布在多个节点上的数据集。 RDD的主要特点如下： RDD是不可变的，但它可以转换为新的RDD进行操作。 RDD 已分区。RDD 由许多分区组成，每个阅读全文

posted @ 2014-09-18 13:31 JackYang 阅读(3713) 评论(0) 推荐(0)

什么是Apache Spark

摘要： Apache Spark 是一个闪电般的开源数据处理引擎，用于机器学习和人工智能应用程序，由最大的大数据开源社区提供支持。什么是Apache Spark？ Apache Spark（Spark）是一个用于大型数据集的开源数据处理引擎。它旨在提供大数据所需的计算速度、可扩展性和可编程性，特别是流数据阅读全文

posted @ 2014-09-18 11:42 JackYang 阅读(3110) 评论(0) 推荐(0)

Apache Spark 源代码分析之主节点和工作节点间协作流程

摘要：摘要 Spark 是一个高效的分布式计算框架，但想要更深入地学习它，就需要分析 Spark 的源代码，这不仅可以帮助更好地了解 Spark 的工作过程，还可以提高集群的故障排除能力。本文主要关注Spark Master的启动过程和Worker的启动过程。 Master Start 我们通过启动脚本阅读全文

posted @ 2014-09-18 11:36 JackYang 阅读(1517) 评论(0) 推荐(0)