摘要：需求： 1、cockroachdb数据库中的表order_sku_manage存在28亿数据，需要导出成csv文件，以便迁移到hadoop上 2、分多个文件存储，每个文件最大存放数据量：5亿 测试结果：单线程导出太慢，应该按id分区间，以多线程或者多进程方式导出，目前还未想到如何动态划分id区间。 阅读全文

摘要：一、关系图 Python的数据结构容器(container)、可迭代对象(iterable)、迭代器(iterator)、生成器 (generator)、列表/集合/字典推导式(list,set,dict comprehension)之间的关系图 二、容器 容器是一种把多个元素组织在一起的数据结构， 阅读全文

摘要：python open()函数打开文件的模式详解 使用python处理文件时，避免不了要用到open()函数。我们今天主要讨论mode参数的区分。 fd = open('文件名（路径）’， mode=‘模式’） 先放上stockoverflow上一个哥么做的图，很清楚的从总体上概括了mode的区分； 阅读全文