lao_bing - 博客园

2023年9月10日

每日总结-23.9.10

摘要： <%@ page import="java.util.Calendar" %> <%@ page import="wangzhan.Thesql" %> <%@ page import="wangzhan.Pd_P_assignment" %> <%@ page import="wangzhan.P 阅读全文

posted @ 2023-09-10 21:02 lao_bing 阅读(11) 评论(0) 推荐(0)

2023年9月9日

每日总结-23.9.9

摘要： <%@ page contentType="text/html;charset=UTF-8" language="java" %> <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR 阅读全文

posted @ 2023-09-09 19:54 lao_bing 阅读(16) 评论(0) 推荐(0)

2023年9月8日

每日总结-23.9.8

摘要： <%@ page language="java" contentType="text/html; charset=UTF-8" pageEncoding="UTF-8"%> <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" 阅读全文

posted @ 2023-09-08 21:55 lao_bing 阅读(10) 评论(0) 推荐(0)

2023年9月5日

每日总结-23.9.5

摘要： <%@ page language="java" contentType="text/html; charset=UTF-8" pageEncoding="UTF-8"%> <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" 阅读全文

posted @ 2023-09-05 20:34 lao_bing 阅读(10) 评论(0) 推荐(0)

第八周

摘要： (1) 本周做了什么：这周是我大数据学习的进一步深化阶段。我投入了大约55小时的学习时间，深入研究了大数据领域的高级技术和应用。我探索了数据湖和数据仓库的设计和实现，学习了如何构建灵活的数据存储架构，以满足不同的业务需求。我还深入研究了大规模图数据处理和分析，了解了如何使用图数据库和图处理框架阅读全文

posted @ 2023-09-05 19:09 lao_bing 阅读(16) 评论(0) 推荐(0)

2023年9月4日

每日总结-23.9.4

摘要： /* publish assignment query * 发布作业查询，将发布作业信息从数据库中查询出来，返回Pd_P_assignment * 输入参数为：发布作业的序号，即id(String) * 若有记录，则返回Pd_P_assignment，若无记录，则返回null * Pd_P_assi 阅读全文

posted @ 2023-09-04 22:31 lao_bing 阅读(16) 评论(0) 推荐(0)

2023年9月2日

第七周

摘要： #map计算 rdd = sc.parallelize([1,2,3,4,5]) def func(date): return date*10 rdds=rdd.map(func) #flatMap解除嵌套 rdd = sc.parallelize(["dwad wad wdas","dwadw d 阅读全文

posted @ 2023-09-02 15:29 lao_bing 阅读(31) 评论(0) 推荐(0)

2023年8月29日

第六周

摘要：新建 hadoop 用户新建用户，名为 hadoop： adduser hadoop 安装一个小工具用于修改用户密码和权限管理： yum install -y passwd sudo 设置 hadoop 用户密码： passwd hadoop 接下来两次输入密码，一定要记住！修改 hadoop 阅读全文

posted @ 2023-08-29 23:16 lao_bing 阅读(10) 评论(0) 推荐(0)

2023年8月24日

第五周

摘要： from pyspark import SparkConf,SparkContext import json #创建sparkconf对象 conf = SparkConf().setMaster("local[*]").setAppName("test_app") #基于sparkconf对象创建阅读全文

posted @ 2023-08-24 00:23 lao_bing 阅读(11) 评论(0) 推荐(0)

2023年8月21日

第四周

摘要： Python与Hadoop生态系统的集成博客题目：学习总结四：Python与Hadoop生态系统的集成实践内容概要：探索如何将Python与Hadoop生态系统工具进行集成，如使用Python编写MapReduce程序、使用PySpark进行数据处理等。学习资源：推荐的Python与Hadoop集成阅读全文

posted @ 2023-08-21 20:49 lao_bing 阅读(16) 评论(0) 推荐(0)

公告