上一页 1 ··· 12 13 14 15 16 17 18 19 20 ··· 24 下一页
摘要: 参考了这篇写的很好的[1],讲了各种模型 因为是各种模型都是用微分方程写的,所以又去学习了一下微分方程 ,真的忘了有没有学过这个,反正一点印象也没有了. 好在[2] 这个文章又把我带回去了. SI 的微分方程是: 下图我写出来分离变量形式(画了三角那个)解微分方程的过程(主要参考[3]), 好在最后 阅读全文
posted @ 2020-02-17 11:06 mashuai_191 阅读(780) 评论(0) 推荐(0)
摘要: spark 本身对 dataframe 的操作支持没有像pandas 那样强大,所有我们可以把spark dataframe 转化成 pandas dataframe 来利用pandas dataframe的方便性,这个是通过 pandas udf 来完成的 spark2.4.4官方文档 https 阅读全文
posted @ 2020-02-07 11:01 mashuai_191 阅读(432) 评论(0) 推荐(0)
摘要: 1. 环境搭建 big data env setup 2. Spark 学习 spark 怎么读写 elasticsearch spark 怎么 连接 读写 ElasticSearch Spark 上time series 处理 Flint by Two Sigma 像 pandas datafra 阅读全文
posted @ 2020-02-06 13:09 mashuai_191 阅读(156) 评论(0) 推荐(0)
摘要: 参考文章: https://www.bmc.com/blogs/spark-elasticsearch-hadoop/ https://blog.pythian.com/updating-elasticsearch-indexes-spark/ https://qbox.io/blog/elasti 阅读全文
posted @ 2020-01-07 16:50 mashuai_191 阅读(1166) 评论(0) 推荐(0)
摘要: 连接: https://stackoverflow.com/questions/52659109/cannot read from elasticsearch using pyspark https://stackoverflow.com/questions/35982550/how to read 阅读全文
posted @ 2019-12-23 18:07 mashuai_191 阅读(562) 评论(0) 推荐(0)
摘要: Centos 7 Centos 7 安装 python3 (不要卸载python2 因为yum 要用) https://phoenixnap.com/kb/how-to-install-python-3-centos-7 Centos 7 安装python3 https://tecadmin.net 阅读全文
posted @ 2019-12-07 13:00 mashuai_191 阅读(180) 评论(0) 推荐(0)
摘要: Install centos 7: Config Network a config example in /etc/sysconfig/network-scripts/ifcfg-ens160 TYPE=EthernetIPADDR=10.180.xxx.xxxPREFIX=24GATEWAY=10 阅读全文
posted @ 2019-12-06 10:34 mashuai_191 阅读(188) 评论(0) 推荐(0)
摘要: install Hadoop CentOS: https://www.vultr.com/docs/how-to-install-hadoop-in-stand-alone-mode-on-centos-7 https://www.linode.com/docs/databases/hadoop/h 阅读全文
posted @ 2019-12-04 09:57 mashuai_191 阅读(204) 评论(0) 推荐(0)
摘要: 图像相似度对比 Template matching 模板匹配 从一张图像里找出template图像,就是模板匹配,可以参考 https://stackoverflow.com/questions/47631852/detecting-and-comparing-shapes-between-two- 阅读全文
posted @ 2019-11-27 15:12 mashuai_191 阅读(1214) 评论(0) 推荐(0)
摘要: https://www.youtube.com/watch?v=DBRISS0UKcA, 2017/04 Single Metric job: 我想按照 一定的time interval 去 aggregation 的时候也是很耗时间的,所有视频里提到的 pre-aggregated. Multi- 阅读全文
posted @ 2019-11-12 14:02 mashuai_191 阅读(357) 评论(0) 推荐(0)
上一页 1 ··· 12 13 14 15 16 17 18 19 20 ··· 24 下一页