会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
翱翔的孤鹰
博客园
首页
新随笔
联系
管理
订阅
[置顶]
Python操作Hdfs,获得hdfs文件名和文件的基本属性,包括修改时间,并转化为标准时间
摘要: test_sh-fang20180604150605.sh{u'group': u'supergroup', u'permission': u'644', u'blockSize': 134217728, u'accessTime': 1530720024452L, u'pathSuffix': u
阅读全文
posted @ 2018-07-14 11:50 翱翔的孤鹰
阅读(858)
评论(0)
推荐(0)
2018年7月17日
python 遍历文件并获得文件的修改时间
摘要: C:\Users\Administrator\Anaconda3\envs\lineage_relation\python.exe D:/python_project/test_db_python/svn_test/check_updated_svn_file.pyD:\VPN\代码\数据仓库存储过
阅读全文
posted @ 2018-07-17 15:21 翱翔的孤鹰
阅读(19280)
评论(0)
推荐(0)
python操作svn,自动update,中文路径问题
摘要: 前提条件是电脑上已经安装好tortoisesvn.且经过测试可以从SVN服务器上上传或下载更新文件。 需要注意的是:svn更新到本地的路径或者export到本地的路径如果是中文,utf-8的编码传给svn是会报错的,是乱码识别不了。 Windows下中文的编码格式是gbk .所以要把中文字符串编码为
阅读全文
posted @ 2018-07-17 14:11 翱翔的孤鹰
阅读(13873)
评论(1)
推荐(0)
2018年7月14日
python遍历Hdfs的文件和目录,并且返回文件或目录的基本属性,包括创建时间,修改时间,文件或目录标识
摘要: 使用client.walk()可以遍历hdfs的文件和目录,加上参数status=True可以同时返回这个文件的基本属性,指示这个文件是file还是directory,以及创建日期和修改日期 # -*- coding: utf-8 -*- from hdfs import * import os f
阅读全文
posted @ 2018-07-14 15:42 翱翔的孤鹰
阅读(3613)
评论(0)
推荐(0)
2017年7月12日
HBase表基本操作,读取和写入
摘要: 1 package com.beifeng.hbase; 2 /** 3 * Hbase基本操作测试,往表写入数据,并读取数据 4 */ 5 import java.io.IOException; 6 import java.util.ArrayList; 7 import java.util.List; 8 9 import org.apache.ha...
阅读全文
posted @ 2017-07-12 16:04 翱翔的孤鹰
阅读(500)
评论(0)
推荐(0)
使用mapreduce向HBase写入数据,只有map,没有reduce
摘要: 源测试数据为: HBase查询结果为: 转载请注明出处,谢谢。
阅读全文
posted @ 2017-07-12 15:59 翱翔的孤鹰
阅读(3341)
评论(0)
推荐(0)
2017年7月7日
SQL 一条SQL语句 统计 各班总人数、男女各总人数 、该班级男女 比例
摘要: 输出结果: numOfTotal numOfMale numOfFemale percentOfMale perscentOfFemale18 14 4 0.777777777777 0.222222222222 参考:http://blog.csdn.net/guoxingege/article/
阅读全文
posted @ 2017-07-07 16:08 翱翔的孤鹰
阅读(9987)
评论(0)
推荐(2)
2017年7月6日
[面试题]在数组中找出3个数使得它们和为0
摘要: 给定一个数组S,试找出3个数a, b, c,使得a+b+c=0。也即从集合中找出所有的和为0的3个数。 例如:集合S={-1,0, 1, 2, -1, 4},则满足条件的3个数有2对:(-1, 0, 1)和(-1, 2, -1)。注意(-1,1,0)与(-1,0,1)算同一个解,所以不用重复考虑。
阅读全文
posted @ 2017-07-06 23:47 翱翔的孤鹰
阅读(5119)
评论(2)
推荐(0)
公告