摘要: 查阅网上或者官网,大致安装流程是->pip3 install streamlit ->streamlit hello 但是这个操作在Ubuntu 或者是intel芯片的mac上是有效的,当在Mac M1上安装使用时就会出现问题,当执行完第一条命令->pip3 install streamlit之后, 阅读全文
posted @ 2021-12-25 20:34 好久不见wsj 阅读(2192) 评论(0) 推荐(0)
摘要: from pyspark.sql.types import * from pyspark.sql import SparkSession spark = SparkSession.builder.appName('TEST').getOrCreate() sc=spark.sparkContext 阅读全文
posted @ 2021-10-29 12:22 好久不见wsj 阅读(693) 评论(0) 推荐(0)
摘要: 想要随意的在pandas 和spark 的dataframe之间进行转换,list类型是关键,因为想要创建pandas的dataframe,方法之一就是使用list类型的data进行创建,而如果要创建spark的dataframe, list也是一种方法。 所以呢,下面的代码我添加了一些注释,方便使 阅读全文
posted @ 2021-10-29 12:12 好久不见wsj 阅读(1253) 评论(0) 推荐(0)
摘要: 网上查了很多人的回复发现没有人对python生成时间给到一个准确的没有问题的解决方案,以下是我踩过的坑,总结到了这里,如果有问题,留言私信给我。 Databricks Runtime Version: 6.4 Extended Support (includes Apache Spark 2.4.5 阅读全文
posted @ 2021-10-19 15:33 好久不见wsj 阅读(254) 评论(0) 推荐(0)
摘要: 今后的博客,只是用来记录余生里的部分工作经验,因此言语不会特别严谨、正式,这个应该更像是”散文版的论文“,如果之后的各位读者对我所表达的意思有疑惑,欢迎随时通过email、评论的方式沟通我,我定全力解决各位疑惑。 至今毕业工作的时间里有遇到各种奇遇,并在连蒙带猜的状态下,解决了一次次问题。例如官方文 阅读全文
posted @ 2021-06-08 17:26 好久不见wsj 阅读(59) 评论(0) 推荐(0)