Frederic Niu

摘要： #前言 最近，笔者因为需要开发一个系统作为毕设的展示，因此就产生了有关多用户管理的问题。在这里我把自己的需求重新阐明一下：能够通过Django自带的用户管理框架，实现多用户的管理，例如登录、登出、session、有效期等管理。 翻看很多同行写的文章，发现有关Django的多用户开发很多都含糊其词。主 阅读全文

摘要： 这个傻逼问题真的搞得我很疲惫，再次重申Pytorch真香！！！！！！TF就是个垃圾！！！！ 好了，言归正传。 因为最近在搞毕设，接触了TF的网络，然后，因为版本的问题，一直有如题的问题出现，便记录一下自己的求解过程。 因为在旧版的tf中有关这个包作为contrib模块，它在TensorFlow 2. 阅读全文

摘要： 在控制台中输入以下命令，然后根据提示操作即可！ /bin/zsh -c "$(curl -fsSL https://gitee.com/cunkai/HomebrewCN/raw/master/Homebrew.sh)" 阅读全文

摘要： 我有自己的博客啦，欢迎各位客官前来哦！戳我进入！ 什么是数仓 一、数仓是什么 数仓，全称就是数据仓库，是一个面向主题，集成的，相对稳定的，反映历史变化的数据集合，通常用于支持管理决策。这里的主题指的是为了分析数据而创造产生的各种有助于决策的数据模型。 随着互联网的发展，数据源头越来越丰富且分散的特点 阅读全文

摘要： 最近一直没更新，不是因为懒，而是要学的东西太多了，时间全用来学大数据的技术栈了，见谅。 言归正传，这篇科普文章就给大家讲讲大数据的技术栈和生态圈，让大数据不再神秘！ 何谓大数据？ 大数据的Wiki英文引文中的解释如下： The tools, processes and procedures allo 阅读全文

摘要： 【大数据】hbase的高可用安装与需要注意的坑 1. hbase的安装 （1）在hbase.apache.org上下载hbase的安装压缩包 （2）集群上需要提前部署好hdfs、zookeeper等hadoop服务，有问题见之前博文的安装部署，这里不讲 （3）将压缩包解压 tar -zxvf hba 阅读全文

摘要： Hive中metastore（元数据存储）的三种方式： 内嵌Derby方式 Local方式 Remote方式 1.本地模式（derby） 这种方式是最简单的存储方式，只需要在hive-site.xml做如下配置便可 <?xml version="1.0"?> <?xml-stylesheet typ 阅读全文

摘要： 这几天学习了MapReduce，我参照资料，自己又画了两张MapReduce的架构图。 这里我根据架构图以及对应的源码，来解释一次分布式MapReduce的计算到底是怎么工作的。 ​话不多说，开始！ 首先，结合我画的架构图来进行解释。 上图是MapReduce的基本运行逻辑。把图从中间切分，左边为M 阅读全文

摘要： 这几天学习大数据，搭建的集群服务器由于Vmware内部实现的虚拟网关，动态分配ip，使得每次ip更改后，均需要修改集群节点的每个hosts文件，不然集群间联系会出错，因此为了杜绝这个问题，这里修改集群的ip为静态ip，杜绝这个问题。 一、打开VMware的网络设置界面 1、选择菜单栏的编辑选项 2、 阅读全文