• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 众包
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
白粥送榨菜
博客园 首页 新随笔 联系 订阅 订阅 管理

[置顶] 【spark】2.内核原理
摘要: 1 spark内核架构 过程如下: 首先: ①、用户通过spark-submit提交自己编写的程序(jar、py)。 ②、一般认为上述的提交方式为Standlone,其会通过反射的方式,创建和构造一个DriverActor进程出来。 ③、Driver执行我们的Application应用程序(我们编写 阅读全文
posted @ 2020-07-07 21:12 白粥送榨菜 阅读(318) 评论(0) 推荐(1)
 
 

2020年11月18日

【梦溪笔谈】7.TensorFlow学习笔记
摘要: #matmul:将矩阵 a 乘以矩阵 b,生成a * b #pow(x,y)=x^y #subtract:返回x-y 的元素 #multiply 对应元素相乘,不是矩阵相乘,而是相同维度的两个向量(或者矩阵)对应的元素相乘,结果还是原向量的维度一致的向量 #reduce_sum:https://bl 阅读全文
posted @ 2020-11-18 19:52 白粥送榨菜 阅读(174) 评论(0) 推荐(0)
 
 

2020年11月12日

【梦溪笔谈】6.spark-sql相关代码
摘要: import os import sys #import datetime import pyspark.sql.functions as F from pyspark.sql.types import * from pyspark.sql import SparkSession #不启动Broad 阅读全文
posted @ 2020-11-12 13:56 白粥送榨菜 阅读(217) 评论(0) 推荐(0)
 
 

2020年11月4日

【梦溪笔谈】4.leetCode笔记
摘要: 【滑动窗口】通过两个同向滑动的指针来控制窗口大小。1.首先左右指针都为0,然后开始滑动右指针2.把对应的值放到滑动窗口中,同时检查窗口中的值是否符合要求3.当窗口中的值都符合要求时,开始滑动左指针参考链接:https://mp.weixin.qq.com/s/ioKXTMZufDECBUwRRp3z 阅读全文
posted @ 2020-11-04 20:39 白粥送榨菜 阅读(123) 评论(0) 推荐(0)
 
 

2020年11月3日

【梦溪笔谈】3.xgboost原理和实战【转】
摘要: 阅读全文
posted @ 2020-11-03 19:55 白粥送榨菜 阅读(101) 评论(0) 推荐(0)
 
 

2020年11月1日

【推荐系统】4.youtube深度推荐系统【转】
摘要: 原论文: 《Deep Neural Networks for YouTube Recommendations》--2016年Google发表的paper 相关解读: https://blog.csdn.net/guoyuhaoaaa/article/details/84938943 https:// 阅读全文
posted @ 2020-11-01 15:34 白粥送榨菜 阅读(144) 评论(0) 推荐(0)
 
【推荐系统】3.深入理解PNN模型--加入Product层【转】
摘要: 参考: https://blog.csdn.net/Blank_spaces/article/details/107479246 https://cloud.tencent.com/developer/article/1708432 PNN中如果采用内积操作,那么嵌入向量两两组合每对组合都得到一个实 阅读全文
posted @ 2020-11-01 15:24 白粥送榨菜 阅读(223) 评论(0) 推荐(0)
 
【推荐系统】2.向量的内积和外积【转】
摘要: 参考:https://blog.csdn.net/jgj123321/article/details/96474456 如何理解特征值和特征向量:https://www.matongxue.com/madocs/228 拷贝一份如下: 本文参考:https://www.cnblogs.com/gxc 阅读全文
posted @ 2020-11-01 15:21 白粥送榨菜 阅读(713) 评论(0) 推荐(0)
 
【推荐系统】1.推荐系统基础
摘要: 推荐系统笔记 阅读全文
posted @ 2020-11-01 14:41 白粥送榨菜 阅读(182) 评论(0) 推荐(0)
 
 

2020年10月20日

【数据比赛】5.回归预测baseLine--以房价预测为例
摘要: 参考:https://www.kaggle.com/lavanyashukla01/how-i-made-top-0-3-on-a-kaggle-competition 导入相关的python包 import numpy as np import pandas as pd import dateti 阅读全文
posted @ 2020-10-20 15:02 白粥送榨菜 阅读(583) 评论(0) 推荐(0)
 
【数据比赛】4.FFT在时序数据上的应用
摘要: 理论上,所有的波形数据,都可以通过不同频率和相位的正弦波或者余弦波叠加而成。所以,可以对时效数据进行FFT,找出其周期特点。 参考:https://www.kaggle.com/muonneutrino/wikipedia-traffic-data-exploration 如图所示,为各个不同语音国 阅读全文
posted @ 2020-10-20 11:38 白粥送榨菜 阅读(570) 评论(0) 推荐(0)
 
 
下一页

公告


博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3