857weir09432

摘要： 1 、套接字方式： socketTextStream( 主机名或 ip ，端口 ) package org.hnsw import org.apache.spark.SparkConf import org.apache.spark.streaming.{Seconds, StreamingCont 阅读全文

摘要： Django路由 路由简单的来说就是根据用户请求的 URL 链接来判断对应的处理程序，并返回处理结果，也就是 URL 与 Django 的视图建立映射关系。 Django 路由在 urls.py 配置，urls.py 中的每一条配置对应相应的处理方法。 Django 不同版本 urls.py 配置有 阅读全文

摘要： 1、django 模型设置与简单应用 Django 对各种数据库提供了很好的支持，包括：PostgreSQL、MySQL、SQLite、Oracle。 Django 为这些数据库提供了统一的调用 API。 我们可以根据自己业务需求选择不同的数据库。 MySQL 是 Web 应用中最常用的数据库。如果 阅读全文

摘要： 当用户访问网站页面时，系统会记录用户访问网站的日志，其中记录了用户 IP 、用用 户 访问的时间、用访问内容等多项属性的信息， 各个属性的说明如表所示 数据准备 1 、用创建数据库 law 2 、用在 law 数据库下创建 law 表 3 、用将数据导入到 law 表 数据统计分析 1 、用网页类型 阅读全文

摘要： 一、文本输出 package org.hnsw import org.apache.spark.sql.{SaveMode, SparkSession} object SparkLearn { def main(args: Array[String]): Unit = { val session = 阅读全文

摘要： 1、django 模板设置与简单应用 模板是一个文本，用于 分离文档的表现形式和内容。分离模板与视图 1）、在 bigdata02 目录底下创建 templates 目录并建立 index.html 文件，整个目录结构如下 注意：模板文件夹命名必须为templates Index.html文件代码 阅读全文

摘要： 过滤+查询 一、查询字段 articleid 和 playcount，设置别名 playcount_jxq 显示前10条 package org.hnsw import org.apache.spark.sql.SparkSession //样本类 三个字段 userid(用户id)、artisti 阅读全文

摘要： 将 DataFrame&DataSet 注册成为临时表，然后通过 SQL 语句进行查询 createOrReplaceTempView createTempView 创建临时视图，此视图的生命周期与用于创建此数据集的 SparkSession 相关联 createOrReplaceGlobalTem 阅读全文

摘要： 一、MVC 框架介绍 MVC 模式（Model–view–controller）是软件工程中的一种软件架构模式，把软件系统分为三个 基本部分：模型（Model）、视图（View）和控制器（Controller）。 MVC 以一种插件式的、松耦合的方式连接在一起。 模型（M）- 编写程序应有的功能，负 阅读全文

摘要： Spark 系统分区方式 哈希分区（ HashPartitioner ），根据哈希值分区 package org.hnsw import org.apache.spark.{HashPartitioner, SparkConf, SparkContext} object SparkLearn_obj 阅读全文