摘要:计算机基础 阅读全文
posted @ 2018-02-20 20:34 Richie` 阅读 (83) 评论 (0) 编辑
摘要:简单搭建了一个可以下载服务端软件的功能,并且实现了进度条的实现,下载的文件可以大一些,这样进度条能更直观一下,测试可以下载3G电影的下传功能 阅读全文
posted @ 2017-08-24 11:38 Richie` 阅读 (224) 评论 (0) 编辑
摘要:讲起动态网页获取我们一定会用到selenium,至于selenium在各种语言的开发代码很多,但是在我们兴致勃勃找了很多代码,要运行的时候,编译器只会给我们抛出异常,因为我们没有配置好环境。下面我将为大家介绍我在配置selenium环境的做法。 Chrome 首先我们从Chrome浏览器的配置说起: 阅读全文
posted @ 2017-08-18 16:31 Richie` 阅读 (953) 评论 (0) 编辑
摘要:实现了对动态网页源码的抓取,模拟浏览器下载网页所有源码,这是因为大的网页分布加载代码的机制,我们通过urllib模块获取源码只能获取一级源码,不能获取二次加载的源码。通过启动浏览器加载到完整的源码信息,抓取到购物网站的商品名,商品价格,商品评价数,并且通过生成器保存到本地 阅读全文
posted @ 2017-08-18 16:09 Richie` 阅读 (122) 评论 (0) 编辑
摘要:<!doctype html>9.Redis Cluster Redis Cluster 集群方案 呼唤集群 并发量 10万/每秒 100万/每秒 数据量 16~256G 业务需要500G呢 网络流量 千兆网卡###解决方法 配置“强悍”的机器,超大内存,硬盘###正确做法 分布式:简单的认为家机器 阅读全文
posted @ 2020-01-14 12:16 Richie` 阅读 (12) 评论 (0) 编辑
摘要:<!doctype html>8.Redis Sentinel Redsi Sentinel 26379 主从复制高可用 为主提供备份 读写分离 故障转移 手动故障转移 写能力和存储能力受限 手动故障转移 slaveof no one slaveof new master 架构说明 自动故障转移 多 阅读全文
posted @ 2020-01-14 11:55 Richie` 阅读 (5) 评论 (0) 编辑
摘要:<!doctype html>7.Redis复制的原理与优化 Redis复制的原理与优化 什么是主从复制 单机有什么问题 机器故障 容量瓶颈 QPS瓶颈 主从复制的作用 数据副本 宽展读性能 总结 一个master可以有多个slave 一个slave只能有一个master 数据流向是单向的,mast 阅读全文
posted @ 2020-01-14 11:54 Richie` 阅读 (6) 评论 (0) 编辑
摘要:#开发运维常见问题 fork操作 同步操作 与内存量息息相关:内存越大,耗时越长(与机器类型有关) info:latest_fork_usec 改善fork 有限使用物理机或高校支持fork操作的虚拟化技术 控制Redis实例最大可用内存:maxmemory 合理配置linux内存分配策略:vm.o 阅读全文
posted @ 2020-01-14 11:52 Richie` 阅读 (5) 评论 (0) 编辑
摘要:持久化的作用 什么是持久化 redis所有的数据保存在内存中,对数据的更新将异步地保存到磁盘上。 持久化的实现方式 快照 mysql dump redis RDB 写日志 Mysql Binlog Hbase HLog Redis AOF RDB 什么是RDB 快照 备份 主从复制 触发机制-主要三 阅读全文
posted @ 2020-01-14 11:50 Richie` 阅读 (6) 评论 (0) 编辑