个人博客转至:tybai.com

无聊就想打码,打码使我快乐


Fork me on GitHub
共 14 页: 上一页 1 2 3 4 5 6 下一页 末页

2018年12月14日

hive删除表和表中的数据

摘要:hive删除表和表中的数据,以及按分区删除数据 hive删除表: hive删除表中数据: hive按分区删除数据: 阅读全文

posted @ 2018-12-14 11:42 TTyb 阅读 (5266) 评论 (0) 编辑

hive新建分区表

摘要:hive新建分区表语句如下: 阅读全文

posted @ 2018-12-14 11:41 TTyb 阅读 (122) 评论 (0) 编辑

2018年12月4日

csdn阅读更多需要注册登录csdn

摘要:csdn目前设置每日使用5次后必须登录才能看到阅读更多的内容,异常恶心。因此搜罗了方法去解决这个问题 方法一 打开想看的 后,在 里边执行以下代码: 方法二: 在如下网址下载 并安装,目前测试只能用于 : "GreasFork" 阅读全文

posted @ 2018-12-04 10:27 TTyb 阅读 (148) 评论 (0) 编辑

2018年11月21日

pandas和spark的dataframe互转

摘要:pandas的dataframe转spark的dataframe spark的dataframe转pandas的dataframe 由于 的方式是单机版的,即 的方式是单机版的,所以参考 "breeze_lsw" 改成分布式版本: 阅读全文

posted @ 2018-11-21 16:50 TTyb 阅读 (3179) 评论 (0) 编辑

2018年11月6日

代码转换为html显示

摘要:需要将代码转换为 使其显示好看一些,可以在这里进行装换: "https://tohtml.com/" "http://hilite.me/" 阅读全文

posted @ 2018-11-06 10:21 TTyb 阅读 (93) 评论 (0) 编辑

2018年11月1日

subprocess实时获取结果和捕获错误

摘要:需要调用命令行来执行某些命令,主要是用 实时获取结果和捕获错误,发现subprocess的很多坑。 普通获取结果方式,其需要命令完全执行才能返回结果: 客 实时获取结果: 想要获取报错机制,使用 "check_output" 捕捉报错和使用 "check_call" 捕捉报错,及时在 "Popen" 阅读全文

posted @ 2018-11-01 15:50 TTyb 阅读 (86) 评论 (0) 编辑

2018年10月29日

centos7开放端口和防火墙设置

摘要:centos7开放端口和防火墙设置。 查看防火墙状态: 如果显示: 打开防火墙服务: 永久开放 协议下的 端口: 重启防火墙: 重新加载防火墙: 查看当前开放的端口和协议: 显示为: 启动端口服务,方便让 下 过来: 停止防火墙服务: 永久停止防火墙,开机不会启动: 阅读全文

posted @ 2018-10-29 17:08 TTyb 阅读 (56) 评论 (0) 编辑

python3的socket使用

摘要:如果需要设置两台机器的端口,请查看博文 "centos7开放端口和防火墙设置" 需要实现两台机器的信息交互,使用 进行调度。其中服务端为: 客户端为: 启动过后如下所示: 客户端发送: 服务端接收: 阅读全文

posted @ 2018-10-29 17:07 TTyb 阅读 (38) 评论 (0) 编辑

python获取set-cookies

摘要:python获取set cookies 阅读全文

posted @ 2018-10-29 14:42 TTyb 阅读 (102) 评论 (0) 编辑

2018年10月9日

TensorFlow使用GPU

摘要:查看机器 的信息: 持续更新查看: 其他方式如下: 阅读全文

posted @ 2018-10-09 09:35 TTyb 阅读 (99) 评论 (0) 编辑

2018年9月28日

pandas的apply操作

摘要:pandas的apply操作类似于Scala的udf一样方便,假设存在如下 : 需要把 中, 与 一一对应,需要将 大于0.5的 取出来作为新的一列,如果小于0.5则不取出来: 得到结果为: PS:如果没有 将会出现错误: 阅读全文

posted @ 2018-09-28 11:13 TTyb 阅读 (306) 评论 (0) 编辑

pandas列合并为一行

摘要:将 利用 列合并为一行,类似于 的`GROUP_CONCAT dataframe` 想要变成如下形式: 利用 去实现就好, 里面可以用 实现,可以看这个 "Spark中SQL列合并为一行" ,而这里没有 只能用另外一种方式实现: 得到结果为: 而还有另外一种方式,但是可能会输出少了那么几列: 阅读全文

posted @ 2018-09-28 11:12 TTyb 阅读 (1020) 评论 (0) 编辑

python将字符串类型list转换成list

摘要:python读取了一个list是字符串形式的'[11.23,23.34]',想转换成list类型: 方式一: 得到结果为: 方式二: 得到结果为: 阅读全文

posted @ 2018-09-28 11:11 TTyb 阅读 (3057) 评论 (0) 编辑

pandas操作

摘要:python中使用了pandas的一些操作,特此记录下来: 生成DataFrame 得到结果为: 按照逗号分隔并拼接 得到结果为: 筛选符合条件的行 得到结果为: 筛选不符合条件的行 import pandas as pd data = pd.DataFrame({ 'v_id': ["v_1", 阅读全文

posted @ 2018-09-28 11:10 TTyb 阅读 (40) 评论 (0) 编辑

numpy操作

摘要:python中使用了numpy的一些操作,特此记录下来: 生成矩阵,替换值 得到结果为: where查找 得到结果为: 增加一行或一列 得到结果为: 按行合并,按列合并 得到结果为: 删除行、列 得到结果为: ndarray转dataframe 得到结果为: 阅读全文

posted @ 2018-09-28 11:09 TTyb 阅读 (78) 评论 (0) 编辑

共 14 页: 上一页 1 2 3 4 5 6 下一页 末页

导航


不用多久

我就会升职加薪

当上总经理

出任CEO

迎娶白富美

走上人生巅峰

Pulpit rock