随笔列表第2页 - dongtime

linux中的匿名管道和命名管道

摘要：一、管道的概念管道是一种两个进程间进行单向通信的机制。管道是一种最基本的IPC机制，作用于有血缘关系的进程之间，完成数据传递。调用pipe系统函数即可创建一个管道。管道又分为匿名管道和命名管道。管道有如下特质：（1）其本质是一个伪文件(实为内核缓冲区) （2）由两个文件描述符引用，一个表示读阅读全文

posted @ 2019-01-07 15:53 dongtime 阅读(4227) 评论(0) 推荐(0)

linux查看CPU信息

posted @ 2018-12-26 16:46 dongtime 阅读(1252) 评论(0) 推荐(0)

磁盘阵列RAID原理、种类及性能优缺点对比

摘要：磁盘阵列（Redundant Arrays of Independent Disks，RAID） 1. 存储的数据一定分片； 2. 分基于软件的软RAID（如mdadm）和基于硬件的硬RAID（如RAID卡）； 3. RAID卡如同网卡一样有集成板载的也有独立的(PCI-e)，一般独立RAID卡性能阅读全文

posted @ 2018-12-25 16:18 dongtime 阅读(1934) 评论(0) 推荐(0)

SMP和MPP的优缺点

摘要： SMP的全称是"对称多处理"（Symmetrical Multi-Processing）技术，是指在一个计算机上汇集了一组处理器(多CPU),各CPU之间共享内存子系统以及总线结构。它是相对非对称多处理技术而言的、应用十分广泛的并行技术。在这种架构中，一台电脑不再由单个CPU组成，而同时由多个处理器阅读全文

posted @ 2018-12-19 19:39 dongtime 阅读(2829) 评论(0) 推荐(0)

Hadoop datablock size

摘要：这是有疑惑的一个问题，因为在董西成的《Hadoop技术内幕——深入解析MapReduce架构设计与实现原理》中提到这个值是64M，而《Hadoop权威指南》中却说是128M，到底哪个是对的呢？我觉得应该都是对的，可能是版本不同导致的不一致，后面终于在Stack OverFlow找到了答案：在Ap 阅读全文

posted @ 2018-12-10 16:31 dongtime 阅读(135) 评论(0) 推荐(0)

MySQL 高可用架构之MHA

摘要：简介： MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司youshimaton（现就职于Facebook公司）开发，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中，M 阅读全文

posted @ 2018-11-19 10:24 dongtime 阅读(225) 评论(0) 推荐(0)

MySQL 高可用架构之MMM

摘要：简介 MMM（Master-Master replication manager for MySQL）是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发，主要用来监控和管理MySQL Master-Master（双主）复制，虽然叫做双主复制，但是业务上同一时刻只允许对一个主进阅读全文

posted @ 2018-11-16 19:29 dongtime 阅读(521) 评论(0) 推荐(0)

五大常见的MySQL高可用方案

摘要：本文来自：https://zhuanlan.zhihu.com/p/25960208 UCloud云计算 UCloud云计算 1. 概述我们在考虑MySQL数据库的高可用的架构时，主要要考虑如下几方面：如果数据库发生了宕机或者意外中断等故障，能尽快恢复数据库的可用性，尽可能的减少停机时间，保证业阅读全文

posted @ 2018-11-15 19:06 dongtime 阅读(708) 评论(0) 推荐(0)

hive加载数据

摘要： 1）加载到普通表 --加载本地文本文件内容（要与hive表字段分隔符顺序都要一致） load data local inpath '/home/hadoop/orders.csv' overwrite into table orders; 1> 如果数据源在HDFS上，则 load data inp 阅读全文

posted @ 2018-11-15 15:36 dongtime 阅读(1495) 评论(0) 推荐(0)

MySQL主从复制和主主复制

摘要：阅读目录 1、简介 2、环境说明 3、主从复制 3.1、MySQL 3.2、配置文件 3.3、开始构建主从复制 3.4、测试主从复制 4、MySql主主复制 4.1、实现原理 4.2、配置文件 4.3、开始构建主主复制 4.4、测试主主复制 5、注意事项阅读目录 1、简介 2、环境说明 3、主从复阅读全文

posted @ 2018-11-14 18:02 dongtime 阅读(1460) 评论(0) 推荐(0)