ExplorerMan

摘要： 【IT168现场报道】2013年4月18-20日，第四届中国数据库技术大会(DTCC 2013)在北京福朋喜来登酒店拉开序幕。在为期三天的会议中，大会将围绕大数据应用、数据架构、数据管理(数据治理)、传统数据库软件等技术领域展开深入探讨，并将邀请一批国内顶尖的技术专家来进行分享。本届大会将在保留数据 阅读全文

摘要： 结论 1：SSD卡显著改善磁盘IO，io占用在50%以下 2：SSD卡使mongodb性能稳定。在200并发，数据量是内存5倍的情况下仍然保证每秒1500次插入和4500次查询。 数据如下： 1：每秒IO完成次数【均在内存用完的时候】 有SSD卡的每秒完成磁盘次数 以及相应次数下磁盘占用% 没有ss 阅读全文

摘要： On this page files 集合 chunks 集合 On this page files 集合 chunks 集合 在对 GridFS 存储进行分片时,需要注意以下的情况: files 集合 大多数情况下不需要对 files 集合进行分片,这个集合通常很小,只包含了一些元信息.集合中也没 阅读全文

摘要： 导入图片引入模块，其中gridfs模块不需要单独安装，引入了pymongo即可直接引入from pymongo import MongoClientfrom gridfs import *import os#链接mongodbclient=MongoClient('localhost',27017) 阅读全文

摘要： 正文 在这篇文章中，提到了Master进程对信号的处理函数，其中有两个信号比较有意思。 SIGHUP：用来热更新（Reload）应用 SIGUSR2：用来在线升级（upgrade on the fly）gunicorn 下面来详细看一下： SIGHUP: Reload the configurati 阅读全文

摘要： 1. supervisor简介 1.1. 官网 http://supervisord.org/ 1.2. 介绍 Supervisor是一个进程控制系统. 它是一个C/S系统(注意: 其提供WEB接口给用户查询和控制), 它允许用户去监控和控制在类UNIX系统的进程. 它的目标与launchd, da 阅读全文

摘要： 背景： 项目中遇到有些脚本需要通过后台进程运行，保证不被异常中断，之前都是通过nohup、&、screen来实现，带着能否做一个start/stop/restart/reload的服务启动的想法找到里Supervisor。关于supervisor的介绍在网上大致搜索总结如下： Supervisor是 阅读全文

摘要： flask-limiter 是一个对客户端的访问速率进行限制的flask扩展.可以自定义一些访问的(速度)限制条件来把那些触发限制的请求拒之门外.一般常用来进行对爬虫的限制. 下面就常见的用法,举了一些例子.更多的例子,请自己查看原始文档. from flask import Flask, requ 阅读全文

摘要： 今天给大家分享我曾经在爱奇艺的面试，过程还是比较有意思的，可以给大家一些参考 聊骚阶段 嗲妹妹：你好，我是爱奇艺的HR，我们正在招聘运维开发岗位，请问您最近有在看工作机会吗？ 我：（这声音也太酥了吧我去……）嗯，你好，信号不太好，能在说下吗？（让我再酥一次吧） 嗲妹妹：（重复） 我：（我去，真的好酥 阅读全文

摘要： RabbitMQ最佳实践 在使用消息机制时，我们通常需要考虑以下几个问题: 消息不能丢失 保证消息一定能投递到目的地 保证业务处理和消息发送/消费的一致性 本文以RabbitMQ为例，讨论如何解决以上问题。 消息持久化 如果希望RabbitMQ重启之后消息不丢失，那么需要对以下3种实体均配置持久化： 阅读全文