随笔分类 -  大数据

上一页 1 ··· 6 7 8 9 10 11 12 13 14 15 下一页
摘要:```sql Error querying database. Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Expression 23 of SELECT list is not in GROUP BY clau 阅读全文
posted @ 2018-12-05 00:09 星朝 阅读(556) 评论(0) 推荐(0)
摘要:Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是 项目。目前最新的发布版本是 2.0.1,未来不久将发布 2.1 版本。就 Ambari 的作用来说,就是创建、管理、监视 Hadoop 的集群,但是这里的 Hadoop 阅读全文
posted @ 2018-11-21 09:32 星朝 阅读(945) 评论(0) 推荐(0)
摘要:一:各种Date之间的转换方法 ?1234567891011121314151617181920212223242526272829303132333435363738394041424344454647public class TimeTest {    & 阅读全文
posted @ 2018-09-11 15:38 星朝 阅读(1947) 评论(0) 推荐(0)
摘要:将数据库中存储时间的数据类型改为varchar(),这时最好让这些时间是数据库中自动生成的(一个没有格式的输入也可能会导致输出错误),因为存储类型为varchar(),所以获取到的值也就被认为是一个字符串,直接将数据库中的时间字符串进行转化(这时那些转化函数是能识别数据库中的时间函数的),客户端的时 阅读全文
posted @ 2018-09-11 15:32 星朝 阅读(3835) 评论(0) 推荐(1)
摘要:目前,业内关于OSGI技术的学习资源或者技术文档还是很少的。我在某宝网搜索了一下“OSGI”的书籍,结果倒是有,但是种类少的可怜,而且几乎没有人购买。 因为工作的原因我需要学习OSGI,所以我不得不想尽办法来主动学习OSGI。我将用文字记录学习OSGI的整个过程,通过整理书籍和视频教程,来让我更加了 阅读全文
posted @ 2018-09-10 10:33 星朝 阅读(597) 评论(0) 推荐(1)
摘要:序列 Python有6中内建的序列,在这里我们重点讨论两种,数组和元组。所有序列都可以做某些特定的操作,大致上常用的是:加,乘,索引,分片以及检查某个元素是否属于序列的成员。 Python还提供一些内建函数来计算序列长度,找出最大值与最小值。 注意:所有的序列都是从0开始递增。 索引 序列中的元素都 阅读全文
posted @ 2018-09-07 16:42 星朝 阅读(1962) 评论(0) 推荐(0)
摘要:```java coding: utf 8 import numpy as np; a=np.array([1,2,3,4,5,6]); print("数组是:",a) 数组变形 a.shape=(2,3); print("变形后的数组:",a) 数组拉直 a.ravel print("拉直后的数组 阅读全文
posted @ 2018-09-07 16:12 星朝 阅读(209) 评论(0) 推荐(0)
摘要:安装numpy : pip install numpynumpy数组生成方法总结In [4]:import numpy as np 使用列表生成一个一维数组 data = [1,2,3,4,5] x = np.array(data) print(x) print(x.dtype) 打印数组 阅读全文
posted @ 2018-09-07 14:39 星朝 阅读(8501) 评论(0) 推荐(0)
摘要:转 Python爬虫突破封禁的6种常见方法 2016年08月17日 22:36:59 阅读数:37936 在互联网上进行自动数据采集(抓取)这件事和互联网存在的时间差不多一样长。今天大众好像更倾向于用“网络数据采集”,有时会把网络数据采集程序称为网络机器人(bots)。最常用的方法是写一个自动化程序 阅读全文
posted @ 2018-09-05 13:04 星朝 阅读(9089) 评论(0) 推荐(0)
摘要:使用爬虫访问网站,需要尽可能的隐藏自己的身份,以防被服务器屏蔽,在工作工程中,我们有2种方式来实现这一目的,分别是延时访问和动态代理,接下来我们会对这两种方式进行讲解 1、延时访问 见名之意,延时访问就是在访问网站时设置一个访问周期,每隔几秒钟访问一次,这样的方式更像是人为访问网站 import t 阅读全文
posted @ 2018-09-05 13:02 星朝 阅读(984) 评论(0) 推荐(0)
摘要:1.在实际的项目开发过程中,之前已经创建好的实体类可能需要增加/删除字段,亦或是更改已有字段的属性,比如主键的增长策略从自增型改为UUID型,那么就会涉及到 SQL 中 alter table 语句的使用。 ALTER TABLE table_name ADD column_name datatyp 阅读全文
posted @ 2018-09-03 14:06 星朝 阅读(2938) 评论(0) 推荐(0)
摘要:Java代码 1 PrintWriter out=response.getWriter(); //向客户端发送字符数据 2 response.setContentType("text/text"); //设置请求以及响应的内容类型以及编码方式 3 response.setCharacterEncod 阅读全文
posted @ 2018-08-28 09:49 星朝 阅读(18768) 评论(0) 推荐(1)
摘要:在项目中做form表单功能提交时,防止用户客户端后退或者刷新时重复提交问题,需要在服务端进行重定向跳转,具体跳转方式有以下几种方式: 公用代码: Java代码  @RequestMapping(value=“/index”,method = { Request 阅读全文
posted @ 2018-08-27 16:22 星朝 阅读(921) 评论(0) 推荐(0)
摘要:原文地址:https://www.jianshu.com/p/4e3edbedb9a8 ===========================================================================================   &n 阅读全文
posted @ 2018-08-09 16:52 星朝 阅读(1586) 评论(0) 推荐(0)
摘要:“你永远不知道意外和明天哪个先到”,这句话应该是很多中小企业的生存现状。 中国每年约有100万家企业倒闭,平均每分钟就有2家企业倒闭!中国4000多万中小企业,存活5年以上的不到7%,10年以上的不到2%!换言之,中国超过98%的中小企业最终都走向了死亡。   然而,意外也有好坏之分,那2 阅读全文
posted @ 2018-08-08 16:19 星朝 阅读(14562) 评论(1) 推荐(1)
摘要:七月的博客还有很多数据结构基础知识,很多面试题,写的非常好,其七月在线app很多课程也很不错。 这只是部分题,后面还有题目。见http://mp.weixin.qq.com/s/C99b32MyrnEVggRAECetUA 本文原文链接: http://m.blog.csdn.net/v_JULY_ 阅读全文
posted @ 2018-07-26 13:46 星朝 阅读(832) 评论(0) 推荐(0)
摘要:注:转自 Hbase技术详细学习笔记 最近在逐步跟进Hbase的相关工作,由于之前对Hbase并不怎么了解,因此系统地学习了下Hbase,为了加深对Hbase的理解,对相关知识点做了笔记,并在组内进行了Hbase相关技术的分享,由于Hbase涵盖的内容比较多,因此计划分享2期,下 阅读全文
posted @ 2018-07-25 09:47 星朝 阅读(717) 评论(0) 推荐(1)
摘要:在京东工作的这一年多时间里,我在整个商品详情页系统(后端数据源)及商品详情页统一服务系统(页面中异步加载的很多服务,如库存服务、图书相关服务、延保服务等)中使用了Servlet3请求异步化模型,总结了Servlet3请求异步化的一些经验和想法跟大家分享和交流。   我将从如下几点阐述Ser 阅读全文
posted @ 2018-07-18 16:11 星朝 阅读(594) 评论(0) 推荐(0)
摘要:1.hadoop有master与slave,Storm与之对应的节点是什么? 2.Storm控制节点上面运行一个后台程序被称之为什么? 3.Supervisor的作用是什么? 4.Topology与Worker之间的关系是什么? 5.Nimbus和Supervisor之间的所有协调工作有master 阅读全文
posted @ 2018-07-05 17:59 星朝 阅读(302) 评论(0) 推荐(0)
摘要:Storm介绍 Storm是Twitter开源的分布式实时大数据处理框架,最早开源于github,从0.9.1版本之后,归于Apache社区,被业界称为实时版Hadoop。随着越来越多的场景对Hadoop的MapReduce高延迟无法容忍,比如网站统计、推荐系统、预警系统、金融系统(高频交易、股票) 阅读全文
posted @ 2018-07-05 17:56 星朝 阅读(340) 评论(0) 推荐(0)

上一页 1 ··· 6 7 8 9 10 11 12 13 14 15 下一页