摘要：
导出结构脚本： mysqldump --sock=/home/mysql/mysql.sock -uuser -ppwd -d database > export.schema.sql 导出数据脚本： mysqldump --sock=/home/mysql/mysql.sock -uuser -p 阅读全文
摘要：
mysql --local-infile -uroot -proot task_ops -e "LOAD DATA LOCAL INFILE '/tmp/data_import/app8.csv' INTO TABLE app_infomation FIELDS TERMINATED BY ',' 阅读全文
摘要：
https://issues.apache.org/jira/browse/YARN-3432 阅读全文
摘要：
pip install ReviewBoard 1.修改pip源，默认源网络不畅 pip install -i http://pypi.douban.com/simple simplejson 2.python-mysql 安装缺少mysql_config yum -y install mysql- 阅读全文
摘要：
# coding:utf-8 import pymysql class Field(object): pass class Expr(object): def __init__(self, model, kwargs): self.model = model # How to deal with a non-dict parameter? ... 阅读全文
摘要：
处理方法: 1.在可以忽略emoji表情的情况下，可以选择将emoji表情字符过滤掉，这样不用动mysql 表结构 过滤Java代码参考如下： public static String filterEmoji(String source) { if(source != null) { Pattern 阅读全文
摘要：
0.parallelize 1.map 2.mapValues 3.flatMap 4.mapPartitions 5.mapPartitionsWithIndex 6.filter 7.reduce 8.reduceByKey 9.groupBy 10.groupByKey 11.partitio 阅读全文
摘要：
使用chrome调试xpath 相信玩过爬虫的都知道一些库,如lxml(python),可以使用xpath方便地对HTML进行提取，但当真正用的时候，问题就来了,想找到一个元素往往要调试好几遍，而且得先code，下面提供了几个工具及如何用chrome进行xpath test 1.XPath Help 阅读全文
摘要：
Solving a Spark error: Invalid signature file digest for Manifest main attributes When using spark-submit to run a jar, you may encounter this error: 阅读全文
摘要：
安装twisted成功后，使用时抛错： No module named win32api 解决方案，需要安装 pywin32 下载地址： https://sourceforge.net/projects/pywin32 选用适当的版本。 阅读全文