02 2021 档案

摘要:今日学习:英语,spark基础实验全部完成,开学准备 spark实验: 第一个实验是安装相关,二到五是本机IDEA写好程序,打成jar包后到虚拟机上运行的,本次博客主要说明一下实验六和实验七中的要点,因为这两项实验花的时间比较长,调试了很多次。 实验六: 安装Flume的过程直接省略,网上有很多详细 阅读全文
posted @ 2021-02-27 14:18 千幽行 阅读(774) 评论(1) 推荐(0)
摘要:昨晚安装完sbt之后发现打包的时候又出BUG了,因此决定实验中的打包操作使用本机的IDEA进行,结合虚拟机中的Spark与Scala版本,在IDEA的pom.xml中引入下面这些东西: <?xml version="1.0" encoding="UTF-8"?> <project xmlns="ht 阅读全文
posted @ 2021-02-25 19:07 千幽行 阅读(86) 评论(0) 推荐(0)
摘要:本来按照实验已经写好了spark的独立应用程序: 但是sbt在安装时发生了以外,最新的1.4.7版本在安装时,下载包的过程中出现了问题,还是在等待了1个多小时之后报错了,目前正在安装1.3.3版本,结果又开始了漫长的下载过程: 因为时间不早的缘故,今日的学习日报只能提前发,如果能够成功下载的话,至少 阅读全文
posted @ 2021-02-24 21:51 千幽行 阅读(59) 评论(0) 推荐(0)
摘要:截至9点之前写完了spark两个实验,这次主要是总结一下关于scala部分的 第一题: 写的时候没有按照要求在REPL模式上运行,因为没弄明白怎么在REPL模式下写for循环和break package winterTest import scala.io.StdIn import scala.ut 阅读全文
posted @ 2021-02-23 21:15 千幽行 阅读(85) 评论(0) 推荐(0)
摘要:今天把spark安装了一下,同时在ubuntu上装了jupyter notebook,原博客网址说是安装ipython notebook,后来上网查了一下才知道这俩差别不大,jupyter notebook涵盖的要更多一些,好像是ipython notebook改名过来的,同时加了一些东西。安装的配 阅读全文
posted @ 2021-02-22 20:07 千幽行 阅读(45) 评论(0) 推荐(0)
摘要:今天把昨晚的bug调试好了,问题出在nn包中的方法引用错了,其次就是定义初始化之后忘记sess.run一次。下面附上正确代码: from __future__ import print_function import tensorflow as tf from tensorflow.examples 阅读全文
posted @ 2021-02-21 22:49 千幽行 阅读(77) 评论(0) 推荐(0)
摘要:今天把老师布置的tensorflow实验做了做,由于下载的是2.0版本,不少1.0版本函数调用都需要.compat.v1前缀,还要加入下面这个代码保证运行: # 保证session.run能够正常运行 tf.compat.v1.disable_eager_execution() 七个实验除了最后一个 阅读全文
posted @ 2021-02-20 20:19 千幽行 阅读(86) 评论(0) 推荐(0)
摘要:今日学习:对scala学过的知识进行梳理,英语学习,调整心理状态。 scala知识点:覆写重写,封装继承,包处理,类操作。 阅读全文
posted @ 2021-02-19 22:02 千幽行 阅读(35) 评论(0) 推荐(0)
摘要:今天补一下scala的继承知识。 package com.chapter01.extendsabout object abstractabout { def main(args: Array[String]): Unit = { val n = new Sub_ABS n.cry() println 阅读全文
posted @ 2021-02-18 20:07 千幽行 阅读(63) 评论(0) 推荐(0)
摘要:今天学习的东西有很多,主要是赶进度,写了不少样例代码方便理解。现在先记录一部分,若有补充会在该博客后续补上。 scala的包知识 昨天已经写了一些关于包的知识,但并不完整,今天上午将包这一板块学完了,现在重新进行梳理: scala中父类与子类的操作和java相比还是有很多不同的,我个人认为跟scal 阅读全文
posted @ 2021-02-17 18:49 千幽行 阅读(107) 评论(0) 推荐(0)
摘要:今日学习:scala,英语 暂定内容,后续可能会有补充 scala类中的构造器运用: package com.chapter01.classabout object ConDemo01 { def main(args: Array[String]): Unit = { val p1 = new Co 阅读全文
posted @ 2021-02-16 13:11 千幽行 阅读(95) 评论(0) 推荐(0)
摘要:今日学习:scala,英语 在scala中,创建的类默认是public类型 package com.chapter01.classabout object Demo01 { def main(args: Array[String]): Unit = { var n = new N println(n 阅读全文
posted @ 2021-02-15 20:37 千幽行 阅读(79) 评论(0) 推荐(0)
摘要:今日学习:scala 惰性函数:在调用的时候才会分配资源,非调用情况下不会执行 package com.chapter01.hanshu object trylazy { def main(args: Array[String]): Unit = { val tre = sum(5, 6) //la 阅读全文
posted @ 2021-02-14 21:21 千幽行 阅读(75) 评论(0) 推荐(0)
摘要:今日学习:英语单词 初一初二给自己放了假,明天开始继续学习scala 阅读全文
posted @ 2021-02-13 23:01 千幽行 阅读(44) 评论(0) 推荐(0)
摘要:今日学习:英语单词 昨晚通宵了,今天拜完年之后睡了一天,请假一天。 阅读全文
posted @ 2021-02-12 20:04 千幽行 阅读(37) 评论(0) 推荐(0)
摘要:除夕快乐 package com.chapter01.hanshu object Year { def main(args: Array[String]): Unit = { var year = "新年快乐" println("新年快乐") printf("%s\n",year) println( 阅读全文
posted @ 2021-02-11 19:56 千幽行 阅读(44) 评论(0) 推荐(0)
摘要:今天主要是帮家里干活,做过年的准备,学习的知识不多。 package com.chapter01.hanshu object Demo03 { def main(args: Array[String]): Unit = { println(sum(10, 20, 3, 5, 7, 9)) } def 阅读全文
posted @ 2021-02-10 21:43 千幽行 阅读(45) 评论(0) 推荐(0)
摘要:今日学习:scala 主要是函数方面的知识 package com.chapter01.hanshu object Demo01 { def main(args: Array[String]): Unit = { //使用方法 val ha = new haha println(ha.sum(10, 阅读全文
posted @ 2021-02-09 20:42 千幽行 阅读(96) 评论(0) 推荐(0)
摘要:今日学习:scala package com.chapter01.inputcon object forcon { def main(args: Array[String]): Unit = { print("to循环:") //[1,5] //这里i相当于val变量,可以写成纯函数 for (i 阅读全文
posted @ 2021-02-08 19:44 千幽行 阅读(82) 评论(0) 推荐(0)
摘要:今天状态不是很好,出去跟家人买东西回来后有点头晕,学的东西不多,先做个小总结: 今日学习:scala。 package com.chapter01.inputcon import scala.io.StdIn object Demo01 { def main(args: Array[String]) 阅读全文
posted @ 2021-02-07 18:09 千幽行 阅读(74) 评论(0) 推荐(0)
摘要:今日学习:scala,《设计原本》阅读一章。 因为学的东西很少,今天权当请假一天。 阅读全文
posted @ 2021-02-06 16:52 千幽行 阅读(68) 评论(0) 推荐(0)
摘要:今日学习:《机器学习十讲》第十讲,scala学习 Scala: package com.chapter01.dataconvert object Demo01 { def main(args: Array[String]): Unit = { var n1 = 10 var n2 = 1.1f // 阅读全文
posted @ 2021-02-05 21:12 千幽行 阅读(63) 评论(0) 推荐(0)
摘要:源地址(本节课无案例):http://cookdata.cn/auditorium/course_room/10021/ 往期的课程总结均已在开头处标明了视频源网址,相关案例在视频下方,相关案例若无法下拉查看可以通过F12(谷歌为例)在相应代码中找到网址。 下面进入正题 《机器学习十讲》——第十讲( 阅读全文
posted @ 2021-02-05 12:59 千幽行 阅读(187) 评论(0) 推荐(0)
摘要:今日学习:《机器学习十讲》第九讲,scala学习。因为今天是小年所以给自己放了个假,学习东西不多 明日安排:《机器学习十讲》第十讲,scala学习. 阅读全文
posted @ 2021-02-04 20:41 千幽行 阅读(42) 评论(0) 推荐(0)
摘要:源地址(相关案例在视频下方):http://cookdata.cn/auditorium/course_room/10020/ 《机器学习十讲》——第九讲(深度学习) 应用 图像识别:IMAGENET。 机器翻译:Google神经机器翻译系统。 语音识别: 以往GMM-HMM传统方法一直未有突破,2 阅读全文
posted @ 2021-02-04 14:53 千幽行 阅读(149) 评论(0) 推荐(0)
摘要:今日学习:《机器学习十讲》第八讲,Scala值相关概念学习。 明日计划:《机器学习十讲》第九讲,Scala。 阅读全文
posted @ 2021-02-03 21:07 千幽行 阅读(52) 评论(0) 推荐(0)
摘要:源地址(相关案例在视频下方): http://cookdata.cn/auditorium/course_room/10019/ 《机器学习十讲》——第八讲(维度灾难) 维度灾难:随着维度(如特征或自由度)的增多,问题的复杂性(或计算算代价)呈指数级增长的现象。 高维空间的反直觉示例:单位球体积: 阅读全文
posted @ 2021-02-03 13:51 千幽行 阅读(273) 评论(0) 推荐(0)
摘要:今日学习:《机器学习十讲》第七讲,Scala。 后续可能还会进行补充。 Scala:cmd窗口相关操作。 val 与 var区别在于能否重新赋值,因此可以通过赋值判断 字符串相乘: Max用法: BigInt计算大数 首尾字符取法 Unit,Null与Nothing package com.chap 阅读全文
posted @ 2021-02-02 18:06 千幽行 阅读(54) 评论(0) 推荐(0)
摘要:源地址(相关案例在视频下方): http://cookdata.cn/auditorium/course_room/10018/ 《机器学习十讲》——第七讲(最优化) 机器学习的优化目标 最小化损失函数: 模型——损失函数——表达式: 图示: 方法 梯度下降: batch梯度下降:使用全部训练集样本 阅读全文
posted @ 2021-02-02 13:37 千幽行 阅读(258) 评论(0) 推荐(0)
摘要:今日学习:《机器学习十讲》第六讲,考研择校相关信息处理。 scala学习: package com.chapter01.datatype object TypeDemo02 { def main(args: Array[String]): Unit = { println("Long的最大值:" + 阅读全文
posted @ 2021-02-01 20:04 千幽行 阅读(73) 评论(0) 推荐(0)
摘要:源地址(相关案例在视频下方):http://cookdata.cn/auditorium/course_room/10017/ 《机器学习十讲》——第六讲(降维) 数学知识 特征向量:设A是n阶方阵,如果有常数λ和n维非零列向量α的关系式Aα=λα成立,则称λ为方阵A的特征值,非零向量α称为方阵A的 阅读全文
posted @ 2021-02-01 14:28 千幽行 阅读(198) 评论(0) 推荐(0)