ligongda2006

摘要： 1 idea工具下，下载scala插件 2 idea下新建scala工程 File——New——module 如果按照上图，设置后点击下载，出现下图下载过慢情况下， 这里我选择了等待，大概等了半小时才自动下载好。 那么可以 也可以从浏览器下载下来，网址为https://www.scala-lang. 阅读全文

摘要： 现象如下图， 代码里有汉字，执行代码报错，说编码格式不对， 修改方式如上面，将右下角的编码格式修改成 u8即可。 阅读全文

摘要： 上一篇文章介绍了如何下载scala, 因为在官网上点击下载按钮无法下载， 下面介绍scala的基础语法： 1 scala和java的关系 Scala是基于jvm的一门编程语言，Scala的代码最终会经过编译成字节码，交给java虚拟机来运行 Scala和java可以无缝互操作，Scala可以任意调用 阅读全文

摘要： 1 scala 2 spark rdd 3 sprak core 4 性能优化 5 spark sql 6 spark streaming 掌握程度-精通的理解： 阅读全文

摘要： 有时候官网下载的链接不管用，可以使用如下链接： http://downloads.typesafe.com/scala/2.11.7/scala-2.11.7.msi，后面版本书可以自己更改 。 阅读全文

摘要： 1 查询具体表分区大小，以字节展示 2 定义shell脚本： 3 调用命令： sh filter5.sh dm_user_excercise.txt 阅读全文

摘要： import java.text.ParseException; import java.text.SimpleDateFormat; import java.util.ArrayList; import java.util.Calendar; import java.util.Date; import java.util.List; public class Test { /*... 阅读全文

摘要： 前言： 公司要统计 treasury库hive表磁盘空间，写了个脚本，如下： 查询hive仓库表占用hdfs文件大小： hadoop fs -du -h /user/hive/warehouse/treasury.db > treasury.txt 脚本： if [[ $unit == "G" && 阅读全文