上一页 1 2 3 4 5 6 ··· 49 下一页
  2021年7月1日
摘要: 最近工作上不太顺,虽然做大数据,但是部门拉胯,现在已经成为了CRUD工程师,唉。 开始重温Java了,学习韩顺平老大的Java培训课,总不能就这样拉跨下去吧。 看到了8皇后问题,这个很经典的问题。 八皇后问题是一个古老而又著名的问题,是学习回溯算法的一个经典案例。之前应该练习过,今天我们就一起来探究 阅读全文
posted @ 2021-07-01 11:12 桌子哥 阅读(76) 评论(0) 推荐(0) 编辑
  2021年6月25日
摘要: 最近在做一个数据仓库迁移的项目,目前在前期阶段,所以学习一下MPP架构的概念。 目前项目组想要替换掉的是Teradata所提供的一个MPP架构的数据仓库,所以做数据仓库迁移。迁移目标为南大通用所提供的GBASE。 对于MPP架构网上的资料较少,开源的有Greenplum这几天在看。由于之前做大数据的 阅读全文
posted @ 2021-06-25 09:50 桌子哥 阅读(667) 评论(0) 推荐(0) 编辑
  2021年6月24日
摘要: 层出不穷的新技术、新概念、新应用往往会对初学者造成很大的困扰,有时候很难理清楚它们之间的区别与联系。本文将以数据研发相关领域为例,对比分析我们工作中高频出现的几个名词,主要包括以下几个方面: 数据 什么是大数据 数据分析与数据挖掘的区别是什么 数据库 什么是数据库 数据库中的分布式事务理论 数据仓库 阅读全文
posted @ 2021-06-24 16:42 桌子哥 阅读(1834) 评论(0) 推荐(1) 编辑
  2021年6月5日
摘要: 数据分组是对相同类别的数据进行汇总,而数据透视表是通过对行或列的不同组合对数据进行汇总,所使用的汇总方法有求和、计数、平均值、标准差等,本文使用SQL对数据进行数据分组和数据透视,下面一起来学习。 1)普通分组 普通的数据分组这里使用的GROUP BY函数,同时使用COUNT函数进行计数。 #数据分 阅读全文
posted @ 2021-06-05 21:14 桌子哥 阅读(304) 评论(0) 推荐(0) 编辑
  2021年5月3日
摘要: 1、数据仓库的发展趋势 1.1数据仓库的趋势 关于数据仓库的概念就不多介绍了。 数据仓库是伴随着企业信息化发展起来的,在企业信息化的过程中,随着信息化工具的升级和新工具的应用,数据量变的越来越大,数据格式越来越多,决策要求越来越苛刻,数据仓库技术也在不停的发展。 数据仓库的趋势: 实时数据仓库以满足 阅读全文
posted @ 2021-05-03 16:44 桌子哥 阅读(4387) 评论(0) 推荐(1) 编辑
  2021年5月2日
摘要: 项目在实际的运行过程中需要对硬件的情况进行一个实时的统计与监测,但是有的系统会自带有一些可视化页面或功能,或者是针对某一项或某几项指标进行可视化,但是如果需要对数据进行针对性的可视化则需要进行相应的设计。 在本次的案例中,针对某系统中项目的实际情况进行数据的提取与可视化。 例如原始数据如下所示: 第 阅读全文
posted @ 2021-05-02 19:06 桌子哥 阅读(152) 评论(0) 推荐(0) 编辑
摘要: 中国银行作为权威的外汇数据提供方,获取中国银行提供的外汇数据可以有助于进行下一步的分析与预测。 在本次的项目中,使用Scrapy+Selenium+BeautifulSoup来获取中国银行的外汇数据并且保存到MySQL数据库中。 第一步:分析中国银行的网站 打开Chrome浏览器,搜索“中国银行”, 阅读全文
posted @ 2021-05-02 18:50 桌子哥 阅读(359) 评论(0) 推荐(0) 编辑
  2021年4月24日
摘要: 学习Pytorch的目的就是用LSTM来对舆情的数据进行处理,之后那个项目全部做好会发布出来。LSTM也是很经典的网络了,一种RNN网络,在这里也不做赘述了。 某型的一些说明: hidden layer dimension is 100 number of hidden layer is 1 这一块 阅读全文
posted @ 2021-04-24 14:10 桌子哥 阅读(472) 评论(0) 推荐(0) 编辑
摘要: RNN循环神经网络,也是一种很常见的神经网络了,在这里也不进行原理展示了。直接上代码。 这一块的话与上一篇逻辑斯蒂回归使用的是相同的数据集MNIST。 第一部分:构造模型 # Import Libraries import torch import torch.nn as nn from torch 阅读全文
posted @ 2021-04-24 13:52 桌子哥 阅读(323) 评论(0) 推荐(0) 编辑
摘要: CNN卷积神经网络现在大家已经耳熟能详,在这里不做太多介绍。本次实验的模型使用两层卷积层。 这一块的话与上一篇逻辑斯蒂回归使用的是相同的数据集MNIST。 第一部分:构造模型 # Import Libraries import torch import torch.nn as nn from tor 阅读全文
posted @ 2021-04-24 13:41 桌子哥 阅读(131) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 49 下一页