摘要： Spark 提供了数据的核心抽象，称为弹性分布式数据集 （RDD）。此数据集的全部或部分可以缓存在内存中，并在多次计算期间重复使用。RDD实际上是一个分布在多个节点上的数据集。 RDD的主要特点如下： RDD是不可变的，但它可以转换为新的RDD进行操作。 RDD 已分区。RDD 由许多分区组成，每个 阅读全文

摘要： Apache Spark 是一个闪电般的开源数据处理引擎，用于机器学习和人工智能应用程序，由最大的大数据开源社区提供支持。 什么是Apache Spark？ Apache Spark（Spark）是一个用于大型数据集的开源数据处理引擎。它旨在提供大数据所需的计算速度、可扩展性和可编程性，特别是流数据 阅读全文

摘要： 摘要 Spark 是一个高效的分布式计算框架，但想要更深入地学习它，就需要分析 Spark 的源代码，这不仅可以帮助更好地了解 Spark 的工作过程，还可以提高集群的故障排除能力。本文主要关注Spark Master的启动过程和Worker的启动过程。 Master Start 我们通过启动脚本 阅读全文

摘要： adb定义：adb（android debug bridge）是android系统中的一种命令行工具，通过它可以和android设备或模拟器通信。 adb工具位置： <path-to-sdk>/tools/adb adb源码位置： <path-to-sourcecode>/system/core/a 阅读全文

摘要： １.简介 在Android中，我们除了从界面上启动程序之外，还可以从命令行启动程序，如使用命令行工具am. am全称activity manager，是Android下非常实用命令，其代码在frameworks\base\cmds\am\src\com\android\commands\am 命令窗 阅读全文

摘要： 本文译自事件风暴提出编写文件：http://ziobrando.blogspot.com/2013/11/introducing-event-storming.html 免责声明：这是关于 EventStorming 的开创性文章。这是一切开始的地方，所以我认为保留原件是相关的。同时， 自从我写这篇 阅读全文

摘要： 前言 一台Solaris主机要下线了，准备将数据迁移至一台AIX主机上，可是在Solaris主机上有一个文件系统有1200万个小文件，因为是跨平台的数据迁移，采用磁盘底层复制无法进行，采用数据备份恢复需要40个小时以上，通过查阅资料，自己搭建测试环境实践，发现rsync软件可以满足数据迁移的需求。 阅读全文

摘要： HashMap的工作原理-Java快速进阶教程 TreeMap工作原理-Java快速进阶教程 什么是 Java 中的 JVM-Java快速进阶教 Java字节码-Java快速进阶教程 什么是 JRE-Java快速进阶教程 什么是 Java 编译器-Java快速进阶教程 java垃圾回收机制GC(Ga 阅读全文

摘要： 简介 对于刚涉足 DB2 领域的 DBA 或未来的 DBA 而言，新数据库的设计和性能选择可能会很令人困惑。在本文中，我们将讨论 DBA 要做出重要选择的两个方面：表空间和缓冲池。表空间和缓冲池的设计和调优会对 DB2 服务器的性能产生深远的影响，因此我们将着重讨论这些活动。 在我们的示例中，我们将 阅读全文

摘要： 在了解AIX处理文件系统的方式之前，最好先对LVM（逻辑卷管理）有一个基本的了解。LVM是一种与传统UNIX分区策略完全不同的磁盘管理方法。它的优点之一是允许动态地给一个文件系统分配更多的空间。LVM的组成要素有：物理卷（PV）、卷组（VG）、物理分区（PP）、逻辑卷（LV）和逻辑分区（LP）等。物理卷：一个物理卷指一块硬盘。卷组：卷组是可用物理硬盘的集合，可以逻辑地看成一块大硬盘。一个卷组由一个或多个物理卷组成，最多可达32个（AIX4.3.2版本下该值已经增至128）。物理分区：卷组中的物理卷划分成固定大小的块（缺省为4MB），这样的块称为物理分区。逻辑卷：每个卷组中可以定义一个或多个逻辑 阅读全文