摘要: 需求: 工作中需要计算农业全要素生产率数据,需要利用HiveQL进行数据仓库提取,然后进行转换式计算,最后需要进行要素生产效率分析,用于后续的深度数据挖掘。 解决: CREATE TABLE IF NOT EXISTS mytable ( col1 STRING, col2 INT, col3 DOUBLE 阅读全文
posted @ 2023-10-23 10:52 数市 阅读(38) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算地级市绿色专利申请和授权数据,需要利用readlines进行分行文本值提取,然后进行转换、匹配和记录写入,最后需要分析汇总,用于后续的深度数据挖掘。 解决: import re file_path='/home/pxing/codes/realsense_ws/src/real 阅读全文
posted @ 2023-10-04 16:03 数市 阅读(73) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算上市公司碳排放数据,需要利用分读for循环进行文本值提取,然后进行匹配和记录写入,最后需要分析汇总,用于后续的深度数据挖掘。 阅读全文
posted @ 2023-09-05 09:45 数市 阅读(38) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算农业全要素生产率数据,需要利用HiveQL进行数据仓库提取,然后进行转换式计算,最后需要进行要素生产效率分析,用于后续的深度数据挖掘。 阅读全文
posted @ 2023-08-29 11:03 数市 阅读(107) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算地级市绿色专利申请和授权数据,需要利用readlines进行分行文本值提取,然后进行转换、匹配和记录写入,最后需要分析汇总,用于后续的深度数据挖掘。 解决: import re file_path='/home/pxing/codes/realsense_ws/src/real 阅读全文
posted @ 2023-08-27 09:41 数市 阅读(18) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算上市公司碳排放数据,需要利用分读for循环进行文本值提取,然后进行匹配和记录写入,最后需要分析汇总,用于后续的深度数据挖掘。 解决: def read_txt(inputpath, outputpath): with open(outputpath, 'w', encoding 阅读全文
posted @ 2023-08-18 09:44 数市 阅读(47) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算上市公司绿色专利申请数据,需要从先搜索表单值,然后进行匹配和请求,最后需要分析汇总,用于后续的深度数据挖掘。 阅读全文
posted @ 2023-08-17 11:06 数市 阅读(34) 评论(0) 推荐(0)
摘要: 需求: 工作中需要计算货币政策不确定性等大量数据,需要从每个数据源中提取灵动文本值,对其进行统计分析汇总,便于后续进行回归及其他实证设计。 阅读全文
posted @ 2023-08-16 09:12 数市 阅读(54) 评论(0) 推荐(0)