2019年11月5日

Python查找电话号码归属地、邮编、运营商信息等
摘要： # -*- coding: utf-8 -*- 1. 查找单个电话号码 from phone import Phone def get_phone_info(phone_num): phone_info = Phone().find(phone_num) try: phone = phone_inf 阅读全文
posted @ 2019-11-05 23:15 落日峡谷 阅读(2022) 评论(0) 推荐(0)

2019年11月2日

Python的字符串格式化，%与format
摘要： 1. '%'字符串格式化 #方法一: '%' num = 10 print('--the number is %d--'%num) #output: "--the number is 10--" print('the float number is %f'%-3.14) #output: "the 阅读全文
posted @ 2019-11-02 21:41 落日峡谷 阅读(835) 评论(0) 推荐(0)
Python基础笔记一之字符转化、复数、位运算、除法运算、floor和ceil取整，round函数四舍五入
摘要： 1. 分片的步长，默认为值1，表示为 xx[s:t:v] 从索引s到索引t，每隔v，取对应索引位置的值 xx = 'hello,world' #从索引0-10，共11个字符 xx[2:] #从索引2直到最后所有的值 Out[2]: 'llo,world' xx[1:5:2] #从索引1到5，即xx[ 阅读全文
posted @ 2019-11-02 16:52 落日峡谷 阅读(657) 评论(0) 推荐(0)

2019年10月31日

FAILED: SemanticException Unable to determine if hdfs://tmaster:8020/user/root/words.db/test_t2 is encrypted
摘要： 使用hive时，建立数据库，建表，写数据； 读数据：select * from test_t2; 报错SemanticException 原因：建表时使用了其他路径，或者在另一个路径的数据库（建立数据库时指定了location参数：create database words_db location 阅读全文
posted @ 2019-10-31 16:42 落日峡谷 阅读(2111) 评论(0) 推荐(0)
Pyspark读取csv文件
摘要： #_*_coding:utf-8_*_ # spark读取csv文件 #指定schema： schema = StructType([ # true代表不为null StructField("column_1", StringType(), True), # nullable=True, this 阅读全文
posted @ 2019-10-31 15:30 落日峡谷 阅读(12272) 评论(2) 推荐(1)
Pyspark：AssertionError: dataType should be DataType
摘要： 1. schema参数，AssertionError: dataType should be DataType # AssertionError: dataType should be DataType schema = StructType([ # true代表不为空 StructField("c 阅读全文
posted @ 2019-10-31 11:46 落日峡谷 阅读(1998) 评论(0) 推荐(0)

2019年10月30日

Pyspark显示中文、ImportError: cannot import name 'Col' from 'pyspark.sql.functions'、Exception: Python in worker has different version、pip is configured with locations that require TLS/SSL
摘要： 1. pyspark读csv文件后无法显示中文 #pyspark读取csv格式时，不能显示中文 df = spark.read.csv(r"hdfs://mymaster:8020/user/root/data_spark.csv", schema=schema) #解决方法，加入encoding= 阅读全文
posted @ 2019-10-30 21:37 落日峡谷 阅读(2211) 评论(0) 推荐(0)
Mysql：[Err] 1630
摘要： Mysql错误 [Err] 1630 1. 错误 1630 [SQL]select date_format(now (),'%Y%m%d'); [Err] 1630 - FUNCTION db.now does not exist. Check the 'Function Name Parsing 阅读全文
posted @ 2019-10-30 10:43 落日峡谷 阅读(1934) 评论(0) 推荐(0)

2019年10月28日

AttributeError: 'NoneType' object has no attribute 'extend'
摘要： Python使用中可能遇到的小问题 AttributeError: 'NoneType' object has no attribute 'extend' 或者AttributeError: 'NoneType' object has no attribute 'append' 原因：这两种方法都是 阅读全文
posted @ 2019-10-28 16:34 落日峡谷 阅读(14849) 评论(0) 推荐(1)

2019年10月23日

Python安装package_name包
摘要： 官网：https://packaging.python.org/tutorials/installing-packages/ 首先查看已安装的包： 1. 命令行模式输入：pydoc modules 2. python解释器输入：help("modules") ## 目前常用的是pip和easy_in 阅读全文
posted @ 2019-10-23 21:47 落日峡谷 阅读(2493) 评论(0) 推荐(0)

导航