不咬牙 - 博客园

2022年1月

摘要：今天继续安装spark，采用自带的例子进行测试先启动saprk ，然后输入如下命令，注意格式，不然很容易报错。我就在格式上出错，找了好久的原因。会得到pi的结果这样就结束了。提交命令用到的一些参数阅读全文

posted @ 2022-01-06 21:47 不咬牙阅读(84) 评论(0) 推荐(0)

摘要：今天选择安装spark 在参考了很多视频后选择了standalone模式，按照网上的教程进行配置注意这个启动命令要在spark的目录下就执行。完成后在网页上查看得到这个界面，spark独立部署模式安装成功阅读全文

posted @ 2022-01-05 23:55 不咬牙阅读(86) 评论(0) 推荐(0)

摘要：今天初步了解spark，看了三个小时的视频，有点茫然，视频安装了三种模式的spark，本地模式，独立模式需要配置三台虚拟机，还有混合yarn的模式，不知道该安装哪种模式。配置好困难。按照教程敲了一个小时的秒杀系统，看到后面的视频我发现他又大量的用到了虚拟机，我有点茫然。好多不会的东西。阅读全文

posted @ 2022-01-04 15:29 不咬牙阅读(85) 评论(0) 推荐(0)

2021年12月

加分与建议

摘要：加分项：学习了2018级钉钉群部分课程每一次我都尽力去完成任务吧，就是没有什么亮点建议：老师作业要求尽早明确，不知道该怎么实现的时候真的很迷茫。阅读全文

posted @ 2021-12-17 11:22 不咬牙阅读(32) 评论(0) 推荐(0)

课程总结

摘要：这个学期的课程感觉内容很多，有点复杂，从暑假开始学的hadoop，到hbase ，hive， mongo，回想起来，经历的有点多。软件需求与分析的话，自我感觉学的一般，画图的时候很不自信，画业务流程图，用例图都非常不自信，一直感觉差点什么。我想这种感觉应该是慢慢练慢慢学的吧。这个学期学到了很多新的阅读全文

posted @ 2021-12-17 11:15 不咬牙阅读(72) 评论(0) 推荐(0)

12月13日

摘要：今天做空值的补缺，我的想法是点击表，选择字段，根据字段展示有空值的数据，然后根据电影的名称调用python来获取电影的发布时间等信息，我按照这个想法进行去。这是java调用python，第一次使用很新奇 public nullbaen getpy(){ nullbaen n=null; try { 阅读全文

posted @ 2021-12-13 22:50 不咬牙阅读(45) 评论(0) 推荐(0)

12月12日

摘要：今天在做处理重复值的时候发现一个问题，ajax的datatype问题，之前就疑惑过，也去了解过但还是一知半解，最近使用ajax有点多，然后越来越疑惑，最终是这样如果是json格式的话，返回值需要可以进行json.parse，将json格式的值转化为javascript格式的值。例如:var ob 阅读全文

posted @ 2021-12-12 14:44 不咬牙阅读(43) 评论(0) 推荐(0)

12月11日

摘要：今天继续写数据处理，我继续去解决数据太多难入库的问题，我最后将写入函数改成这样 //这个是改变了插入逻辑插的快一些 public void add_1(String name ,ArrayList<ArrayList<String>> arrayLists,ArrayList<String>zd) 阅读全文

posted @ 2021-12-11 22:59 不咬牙阅读(47) 评论(0) 推荐(0)

12月10日

摘要：今天做数据处理系统，然后发现这个要处理的表格与我之前要处理的表格有些对不上，之前没想过处理没有中文字段的表格，然后对之前的创建数据表操作进行修改，然后在数据入库时遇到问题，数据量太大了，运行十几分钟，还是没有成功，然后运行结束后报错，我就知道之前那样写入数据不行，然后就去找解决方案。目前没有解决。阅读全文

posted @ 2021-12-10 22:20 不咬牙阅读(20) 评论(0) 推荐(0)

12月9日

摘要：今天用python做数据分析，但是我导wordcloud一直install安装不成功，报错说和pip版本不一样，然后我去更新了pip，但是还是报错然后我发现他报错关于c++，然后网上搜一下，说是缺少相关c++解释器。在这个网站下搜索自己要的包 https://www.lfd.uci.edu/~ 阅读全文

posted @ 2021-12-09 17:21 不咬牙阅读(32) 评论(0) 推荐(0)

公告