摘要：MySQL数据库优化 1-1MySQL优化简介 数据库优化的目的 避免出现页面访问错误 由于数据库连接timeout产生5XX错误 由于慢查询造成页面无法加载 由于阻塞造成数据无法提交 增加数据库的稳定性 很多数据库的问题都是由于低效查询引起的 优化用户体验 流畅页面的访问速度 良好的网站功能体验 阅读全文

摘要：关于MySQL分区表 确认MySQL服务器是否支持分区表 mysql> show plugins; MySQL分区表特点 在逻辑上为 一个表，在物理上存储在多个文件中 HASH分区的键值必须是一个INT类型的值，或通过函数可以转为INT类型 如：PARTITON BY HASH(UNIX_TIMES 阅读全文

摘要：课程准备： MySQL 5.7版本+SQLyog 数据库设计规范 数据库命名规范 所有的数据库对象名称必须使用小写字母并用下划线分割（数据库名 表名 列名...) 大小写敏感 所有的数据库对象名称禁止使用MySQL保留关键字 所有的数据库对象命名做到见名识义，最多不超过32个字符 例如：用户数据库 阅读全文

摘要：道路交通实时流量监控预测系统 我们项目要做什么 采集数据 分析 建模 实时预测 展示 总体业务要求 GB级数据实时处理 毫秒级延迟 海量数据实时预测 阅读全文

摘要：Deepgreen官网下载地址：http://vitessedata.com/products/deepgreen-db/download/ 不需要注册 Greenplum官网下载地址：https://network.pivotal.io/products/pivotal-gpdb/#/releas 阅读全文

摘要：磁盘挂载： [root@sdw1 ~]# mkfs.ext4 /dev/vdb[root@sdw1 ~]# blkid /dev/vdb >> /etc/fstabvi /etc/fstab UUID="545f5a70-03ac-4c35-8ab4-80f8bea36f47" /data ext4 阅读全文

摘要：Redis云平台Cachecloud 遇到的问题： 发布构建繁琐，私搭乱盖 节点&机器等运维成本 监控报警初级 CacheCloud 1.一键开启Redis。（Standalone、Sentinel、Cluster） 2.机器、应用、实例监控和报警。 3.客户端：透明使用、性能上报 4.可视化运维： 阅读全文

摘要：课程目录 缓存的使用与设计 缓存的受益与成本 受益：1.加速读写：通过缓存加速读写速度：CPU L1/L2/L3Cache、Linux page Cache加速硬盘读写、浏览器缓存、Ehcache缓存数据库结果 2.降低后端负载：后端服务器通过前端缓存降低负载：业务端使用Redis降低后端MySQL 阅读全文

摘要：用redis-trib.rb搭建集群 redis-trib.rb是采用Ruby实现的Redis集群管理工具。内部通过Cluster相关命令帮我们简化集群创建、检查、槽迁移和均衡等常见运维操作，使用之 前需要安装Ruby依赖环境。下面介绍搭建集群的详细步骤。 1.Ruby环境准备 安装Ruby： -- 阅读全文

摘要：呼唤集群 并发量 ops 数据量 大数据 数据分布 顺序分区和哈希分区 修改：顺序分布其实不支持批量操作 哈希分布 搭建集群 Redis Cluster架构 节点 cluster-enabled yes 开启节点 meet 节点间通讯，所有节点共享信息 指派槽 16384个slot默认 复制 主从复 阅读全文

摘要：主从复制高可用？ 主从复制，主挂掉后需要手工来操作麻烦 写能力和存储能力受限 （主从复制只是备份，单节点存储能力） #其实分布式后面再讲 架构说明 sentinel监控多套redis 安装配置 sentinal的默认端口26379，形成如下的安装配置（其实就是单机多实例） 客户端链接 客户端链接流程 阅读全文

摘要：什么是主从复制 主从复制的配置 全部复制和部分复制 故障处理 开发运维常见问题 主从复制作用 数据副本 扩展读性能 简单总结： 1.一个master可以有多个slave 2.一个slave只能有一个master 3.数据流向是单向的，master到slave 主从复制的配置 两种实现方式： slav 阅读全文

摘要：fork操作 1.同步操作 2.与内存量息息相关：内存越大，耗时越长（与机器类型有关） 3.info:latest_fork_usec 进程外开销 AOF追加阻塞 不知道哪个命令？？？ 单机多实例部署 无视频 参考：https://www.cnblogs.com/qingqing74647464/p 阅读全文

摘要：Redis持久化的取舍和选择 持久化的作用 RDB save命令容易阻塞 redis配置文件中可以设置/opt/moudels/redis/config save 900 1 #900s内改变1次就生成RDB save 300 10 save 60 10000 dbfilename dump.rdb 阅读全文

摘要：瑞士军刀 Redis 慢查询 找到系统中瓶颈的命令 客户端请求的生命周期 两点说明： 1.慢查询发生在第三阶段 2.客户端超时不一定慢查询，但慢查询是客户端超时的一个可能因素 两个配置默认值 config get slowlog-max-len=128 一种队列 通常设置1000 config ge 阅读全文

摘要：Java客户端 Jedis maven依赖 连接池的使用 python客户端 redis-py 阅读全文

摘要：Redis API的使用和理解 1.通用命令 通用命令 mset /mget 批量设置 减少了网络时间 一般而言=网络时间+命令时间 sadd myset a b c d e 将一个或多个成员元素加入到集合中 keys * 生产不适用 热备从节点 scan dbsize 计算key的总数 exist 阅读全文

摘要：第一章 Redis初识 Redis是什么 开源 基于键值对的存储服务系统 多种数据结构 高性能、功能丰富 Redis的特性 速度块 --10w OPS 内存 持久化 --将数据的更新异步地保存在磁盘上 多种数据结构 --字符串 hash 列表 集合 有序集合 --延申：位图 地理信息 支持多种编辑语 阅读全文

摘要：Deepgreen分布式安装文档 环境准备 1、安装VMware虚拟机软件，然后在VMware安装三台Linux虚拟机(使用centos7版本) 2、使用的虚拟机如下： 192.168.136.155 mdw 192.168.136.156 sdw1 192.168.136.157 sdw2 2.1 阅读全文

摘要：Greenplum/Deepgreen数据库安装（单机/伪分布） 首先去官网下载centos7：https://www.centos.org/download/，选择其中一个镜像下载即可，网上随意下载安装过程有风险！ 安装系统注意事项： 1.选择英文安装过程（安装数据库到最后可能出现本地语言等问题） 阅读全文

摘要：开发工具IDEA环境安装配置 该工具和eclipse类似，但是使用感受确实比eclipse好，越来越多人开始使用IDEA了。 下载地址如下 ： https://www.jetbrains.com/idea/download/#section=windows 下载Ultimate版本（功能更强） 破解 阅读全文

摘要：GP中的table和其它关系型数据表是一样的，除了数据被分布在不同的segment以外。 建表时需定义以下几个方面：1. 指定列和数据类型2. 约束3. 分布策略4. 数据存储方式5. 大表分区策略 选择列的数据类型 关于字符类型，gp中CHAR、VARCHAR、TEXT在性能上没有什么差异。但其它 阅读全文

摘要：申明：本文出自：http://www.cnblogs.com/zlslch/p/5448857.html （该博客干货较多） 1 Java基础： 视频方面： 推荐《毕向东JAVA基础视频教程》。 链接：https://pan.baidu.com/s/1v6KxWA3kCJWAC0HpDSV4_A 提 阅读全文