06 2018 档案
摘要：微信搜索：CoXie带你学编程，后台回复你想要的资源，并留下你的微信号，将于3个工作日内会回复或添加微信进行回复 你说，我们的未来 被装进棺材，染不上尘埃 我很早之前就想开发一款app玩玩，无奈对java不够熟悉，之前也没有开发app的经验，因此一直耽搁了。最近想到尝试用python开发一款app，
阅读全文
摘要：真正有知识的人的成长过程，就像麦穗的成长过程：麦穗空的时候，麦子长得很快，麦穗骄傲地高高昂起，但是，麦穗成熟饱满时，它们开始谦虚，垂下麦芒。 ——蒙田《蒙田随笔全集》 上篇论述了关于python多线程是否是鸡肋的问题，得到了一些网友的认可，当然也有一些不同意见，表示协程比多线程不知强多少，在协程面前
阅读全文
摘要：简评：编写安全代码很困难，当你学习一个编程语言、模块或框架时，你会学习其使用方法。 在考虑安全性时，你需要考虑如何避免被滥用，Python 也不例外，即使在标准库中，也存在用于编写应用的不良实践。然而，许多 Python 开发人员却根本不知道它们。 1. 输入注入（Input injection）
阅读全文
摘要：微信搜索：CoXie带你学编程，后台回复你想要的资源，并留下你的微信号，将于3个工作日内会回复或添加微信进行回复 大家在学习Python的时候，有人会问“Python要学到什么程度才能出去找工作”，对于在Python培训机构学习Python的同学来说这都不是问题，因为按照Python课程大纲来，一般
阅读全文
摘要：一、引言 Yarn在Hadoop的生态系统中担任了资源管理和任务调度的角色。在讨论其构造器之前先简单了解一下Yarn的架构。 上图是Yarn的基本架构，其中ResourceManager是整个架构的核心组件，它负责整个集群中包括内存、CPU等资源的管理；ApplicationMaster负责应用程序
阅读全文
摘要：如今，越来越多的人使用移动应用程序。而移动应用将在未来成为一个价值数十亿美元的产业。大数据可以帮助企业构建最佳的用户体验。 多年来，开发移动应用程序的技术一直在不断发展，这实际上为非技术方面的重大革命铺平了道路，并且这一切都与大数据有关。 用户定期生成的大量数据可以帮助开发人员创建更多更好的移动应用
阅读全文
摘要：分几点来答： 1. 首先，这其实是个技术选型题。 做技术选型的时候不能单纯的考虑性能，应该优先考虑业务类型，以及团队水平。另外的话，框架只是其中一环，还有配套呢。 如果是数据驱动型，尤其是要用到关系型数据库，那么选择Django足以，ORM会比较省事，但是性能损耗是个很明显的问题。不过还是看团队，如
阅读全文
摘要：在多数项目中，总有一些几乎一成不变的 CRUD 操作，编写这些代码很无聊，但又是整个系统必不可少的功能之一。我们在上一个项目中也面临类似的问题，虽然已经实现了一个功能相对完整的管理后台，也尽量做到了代码复用，但随着项目规模的增长，需要编写的样本代码也不断膨胀，占用了大量开发时间。 面对这种局面，我自
阅读全文
摘要：在Django项目中使用MongoDB作为后端数据库，且不改变Django的ORM框架。实现Django用户管理程序对MongoDB数据库中文件的增加和修改。 用法 1.pip install djongo 2.在Django项目下的setting.py中增加如下代码： 3.运行 manage.py
阅读全文
摘要：一、监控所有的request请求 如何实现系统监控，自动发送错误日志的邮件呢？ 只需配置配置settings文件即可。 1.设置发送邮件配置信息 邮件会发送到ADMINS设定的邮件列表中。 2.配置LOGGING 1）配置mail_admin的handler level为日志级别 django.ut
阅读全文
摘要：我们看到越来越多的数据泄漏事故、勒索软件和其他类型的网络攻击，这使得安全成为一个热门话题。 去年，企业IT面临的威胁仍然处于非常高的水平，每天都会看到媒体报道大量数据泄漏事故和攻击事件。 随着攻击者提高其攻击能力，企业也必须提高其保护访问和防止攻击的能力，安全和风险领导者必须评估并使用最新技术来抵御
阅读全文
摘要：简评：还有其他公司比 Facebook 更能收集我们的数据么?大概，可能，没准是谷歌。(文末彩蛋) 最近 Facebook 已经因为收集个人数据而站在了聚光灯前，它收集用户数据并因此获利。 但是要知道，Facebook 不是单独一家「在用户毫不知情」的情况下收集数据的公司，Google 可能更甚：它
阅读全文
摘要：每年，市场上都会出现种种不同的数据管理规模、类型与速度表现的分布式系统。在这些系统中，Spark和hadoop是获得最大关注的两个。然而该怎么判断哪一款适合你? 如果想批处理流量数据，并将其导入HDFS或使用Spark Streaming是否合理?如果想要进行机器学习和预测建模，Mahout或MLL
阅读全文
摘要：昨天在上厕所的时候突发奇想，当你把usb插进去的时候，能不能自动执行usb上的程序。查了一下，发现只有windows上可以，具体的大家也可以搜索（搜索关键词usb autorun）到。但是，如果我想，比如，当一个usb插入时，在后台自动把usb里的重要文件神不知鬼不觉地拷贝到本地或者上传到某个服务器
阅读全文
摘要：读完需要 9 分钟 1. 什么是虚拟环境？ 虚拟环境的意义，就如同 虚拟机 一样，它可以实现不同环境中Python依赖包相互独立，互不干扰。这在一定程度的意义上，给了我们的项目一份很有力的保障。在这里，我把它戏称为「保险」。全网唯一。 举个例子吧。 假设我们的电脑里有两个项目，他们都用到同一个第三方
阅读全文
摘要：一提到程序猿，我们的脑子里就会出现这样的画面： 或者这样的画面： 心头萦绕的字眼是：秃头、猝死、眼镜、黑白 T 恤、钢铁直男…… 而真实的程序猿们，是每天要和无数数据，以及数十种编程语言打交道。 上能手握亿万数据面不改色，下能修改 Bug 奋战两昼夜 。他们热爱生活，讨厌 Bug…… 时代在进步，今
阅读全文
摘要：这个为什么说是一次学生时代的经历呢，我的出发点并没有是为了吊胃口。确实，这个Python小应用，只能在学生时代用得着吧，尤其是高中和大学，如果你没有想到也没关系，看完我下面说的就会明白了。 在这里还是要推荐下我自己建的 Python开发学习群：725479218 ，群里都是学
阅读全文
摘要：Intuit数据工程副主管Loconzolo双脚都已经迈进数据湖里了。Smarter Remarketer首席数据科学家DeanAbbott也为云技术的发展指出了捷径。他们二人一致认为, 大数据与分析学前沿是个活动目标，这一领域包含了储存原始数据的数据湖和云计算。尽管这些技术并未成熟，但等待也并非上
阅读全文
摘要：从所周知，大数据已经不简简单单是数据大的事实了，而最重要的现实是对大数据进行分析，只有通过分析才能获取很多智能的，深入的，有价值的信息。那么越来越多的应用涉及到大数据，而这些大数据的属性，包括数量，速度，多样性等等都是呈现了大数据不断增长的复杂性，所以大数据的分析方法在大数据领域就显得尤为重要，可以
阅读全文
摘要：在这里还是要推荐下我自己建的 大数据学习交流群:784557197 ，群里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只有大数据软件开发相关的），包括我自己整理的一份2018最新的大数据进阶资料和高级开发教程，欢迎进阶中和进想深入大数据的小伙伴加入
阅读全文
摘要：1\. 正则表达式基础 1.1\. 简单介绍 正则表达式并不是Python的一部分。正则表达式是用于处理字符串的强大工具，拥有自己独特的语法以及一个独立的处理引擎，效率上可能不如str自带的方法，但功能十分强大。得益于这一点，在提供了正则表达式的语言里，正则表达式的语法都是一样的，区别只在于不同的编
阅读全文
摘要：大数据分析的5个方面 用涉及到大数据，不幸的是所有大数据的属性，包括数量，速度，多样性等等都是描述了数据库不断增长的复杂性。那么大数据给我们带来了什么好处呢？大数据最大的好处在于能够让我们从这些数据中分析出很多智能的，深入的，有价值的信息。 下面我总结了分析大数据的5个方面。 1. Analytic
阅读全文
摘要：前言 我这个博客一直都是一些技术分享,show code的地方，我从来没有写过个人生活或者情感杂谈,当然我也从来没有谈论过我对什么东西的喜恶. 很多人喜欢喷XX语言，喜欢谈论XX和YY的优缺,甚至凑了一本不知所云的书…好吧,我觉得没有使用一门语言超过10年，没有对一个技术研究个5,6年， 不好意思说
阅读全文
摘要：作为一名Python爱好者，我也想跟大家分享分享我自学Python的一些小经验。搬来你的小板凳，听听看吧。也许，你会很有收获，也许你也走上了自学Python的不归路。开讲啦~ 首先，你要有自信心，要明确学习目的 。学Python，可以解决在软件使用中所遇到的问题，可以为找到理想工作添加重要砝码。还能
阅读全文
摘要：微信搜索：CoXie带你学编程，后台回复你想要的资源，并留下你的微信号，将于3个工作日内会回复或添加微信进行回复 目的是在运行python脚本的时候告诉操作系统我们要用python解释器去运行py脚本 所以我们在第一句往往会写如下两句中的其中一句： 或 就是说在没有在执行程序时指出用什么程序运行py
阅读全文
摘要：1.0 "下载Python2.7x和Python3.5x版本" 2.0 安装Python 3.0 配置环境变量，分别添加至path路径 4.0 只修改Python27文件中的.exe文件（这样系统默认为Python3.5） 将python.exe修改为python2.exe
阅读全文
摘要： 朋友不在于多，知心就好;资料不在于多，精致就好。一份专业的大数据学习资料才是学习大数据的利刃。小编分享的这套大数据学习资料将从学习大纲、书籍、视频教程分别分享。 在这里还是要推荐下我自己建的 大数据学习交流群:784557197 ，群里都是学大数据开发的，如果你正在学习大数据
阅读全文
摘要： 一家公司的数字化改造应该从清晰的趋势和障碍出发，更好地规划出一条通往其所寻求业务成果的路线。考虑到这一点，以下是我们关注的三大数据趋势，以及在数字时代可能出现在企业和成功之间的三大困境。在这里还是要推荐下我自己建的 大数据学习交流群:784557197 ，群里都是学大数据开发
阅读全文
摘要：今天小编逛论坛看见一篇百万阅读量的爆文，里面出了四个填空题，问你：____是铜牌，____是银牌，____是金牌，____是王牌。小编我的答案是：Java是铜牌，Linux是银牌，Hadoop是金牌，学好大数据是王牌。因为Java是学大数据的基础，有基础然后就可以学后续的；最后只有学好大数据这一王牌
阅读全文
摘要：因为大数据爆发，因此出现了大数据开发、大数据分析这两大主流的工作方向，目前这两个方向是很热门，不少人已经在开始转型往这两个方向发展，相较而言，转向大数据分析的人才更多一点，而同时也有不少人在观望中，这边小编收集了十个为什么要学习大数据分析的十个理由。 下面我们一起来看看大数据专家写给大数据分析学习者
阅读全文
摘要：大数据的作用在于在庞大的全量数据的基础上，通过算法模型，得出有意义的结果，进而进行资源配置的优化、现象的发现、未来的预测等。 长话短说，让我们用实例来告诉你大数据有多么的强大。在这里还是要推荐下我自己建的 大数据学习交流群:784557197 ，群里都是学大数据开发的，如果你正在学习大数据 ，小编欢
阅读全文
摘要：大数据的作用在于在庞大的全量数据的基础上，通过算法模型，得出有意义的结果，进而进行资源配置的优化、现象的发现、未来的预测等。 长话短说，让我们用实例来告诉你大数据有多么的强大。在这里还是要推荐下我自己建的 大数据学习交流群:784557197 ，群里都是学大数据开发的，如果你正在学习大数据 ，小编欢
阅读全文
摘要：在这里还是要推荐下我自己建的Python开发学习群:483546416，群里都是学Python开发的，如果你正在学习Python ，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有Python软件开发相关的），包括我自己整理的一份2018最新的Python进阶资料和高级开发教程，欢迎进阶中和
阅读全文
摘要：微信搜索：CoXie带你学编程，后台回复你想要的资源，并留下你的微信号，将于3个工作日内会回复或添加微信进行回复 很多小伙伴说想学习想学习但是没有学习书籍，我给大家分享一大波学习书籍，具体的可以自己往下翻 《“笨办法学”Python3》 Zed Shaw 著 (2018年5月) 本书是基于Pyt
阅读全文
摘要：requests库的主要方法：requests.request()构造一个请求 requests.get()获取HTML网页的主要方法，对应于HTTP的GET requests.head()获取HTML网页头的方法，对应于HTT
阅读全文
摘要：我们首先打开IDLE选择File new window命令（或者可以直接按键Ctrl+N键，在很多地方这个按键是新建文件的意思） 在这里还是要推荐下我自己建的Python开发学习群：725479218，群里都是学Python开发的，如果你正在学习Python ，小编欢迎你加入,大家都是软件开发党，不
阅读全文
摘要： 这些年，编程语言的发展进程很快，在 商业公司、开源社区 两股力量的共同推动下，涌现出 诸如Go、Swift 这类后起之秀，其中最为耀眼的是 Python 。 在这里还是要推荐下我自己建的Python开发学习群：725479218，群里都是学Python
阅读全文
摘要：最近好多小伙伴说想搞个项目实战类的，我就花了一点时间做了一个爬虫项目（在代码复制的时候可能会有点问题，缩格一下就没有问题了） 想要获取更多源码或者答疑或者或者交流学习可以加群：725479218
阅读全文
摘要：波士顿咨询公司（Boston Consulting Group）最近的一项调查显示，公司拥有的大数据能力与他们渴望在三年内拥有的大数据能力之间存在着巨大的差距。 其中一项能力——优先级能力——的不足影响尤甚，因为它是成功的根本。 此外，另外一个明显的现象是，企业选择大数据方案时非常地“随性”。有时候
阅读全文
摘要：声明 本专栏为我的个人技术专栏，所有观点均为个人观点。如欲转载，请注明出处。 大数据平台通过将所有数据整合起来，充分分析与挖掘数据的内在价值，为业务部门提供数据平台，数据产品与数据服务。大数据平台接入的数据中可能包括很多用户的隐私和敏感信息，如用户在酒店的入住纪录，用户支付信息等，这些数据存在可能泄
阅读全文
摘要：Apache Beam（原名Google DataFlow）是Google在2016年2月份贡献给Apache基金会的Apache孵化项目，被认为是继MapReduce，GFS和BigQuery等之后，Google在大数据处理领域对开源社区的又一个非常大的贡献。Apache Beam的主要目标是统一
阅读全文
摘要：写在前面 近日恰逢学生临近毕业，课程后期大家“期待+苦逼”的时刻莫过于每天早上内容回顾和面试题问答部分【临近毕业每天课前用40 60分钟对之前内容回顾、提问和补充，专挑班里不爱说话就的同学回答】。 期待的是可以检验自己学习的成功；苦逼的是怎么又有东西没记住，但我们依然每天坚持一遍、一遍又一遍指导记住
阅读全文
摘要：``` import time import random import pickle import os class Card(object): def __init__(self, cardId, cardPasswd, cardMoney): self.cardId = cardId self
阅读全文
摘要： 小编本人目前就是在电脑面前工作，常常会工作到凌晨两三点还在为自己的梦想奋斗着。有时在办公椅上就稀里糊涂睡着了，我相信有很多朋友和我一样，这样是很不好的。第一对身体不好，第二对电脑不好。 对身体方面，小编也只能说大家年轻的时候千万要对自己好点，特别是在电
阅读全文
摘要：认识爬虫 网络爬虫，如果互联网是一张蜘蛛网，网络爬虫既是一个在此网上爬行的蜘蛛，爬了多少路程即获取到多少数据。 python写爬虫的优势 其实以上功能很多语言和工具都能做，但是用python爬取的速度更快，代码最简单，总而言之就是高效！与其它的编程语言
阅读全文
摘要：最近研究cookie和sso比较多，不知道你们有没有发现，你只要登录过简书，不logout，不clear cookie，重新打开页面的话，可以无需登录进入账号，于是激发了我强烈的好奇心做了以下测试，并发现了一个很神奇的问题，不知道简书如何定义这个问题，是bug还是符合预期？@简宝玉 一、当我们登录的
阅读全文
摘要：一 导入 pymongo from pymongo import MongoClient 二 连接服务器 端口号 27017 连接MongoDB 连接MongoDB我们需要使用PyMongo库里面的MongoClient，一般来说传入MongoDB的IP及端口即可，第一个参数为地址host，第二个参
阅读全文
摘要：当前python分为2.x版本，以及3.x版本，这两个版本相互直接是不兼容的，但是当前世面的主流web或者程序还是2.x偏多，所以我这边主要是2.x版本为基础，确切地说，是2.7版本。 下面来说说 如何安装开发环境以及开发工具 一、环境的安装 MAC上安装python 如果你正在使用Mac，系统是1
阅读全文
摘要：CentOS7.4，anaconda3，python3.6，tensorflow环境下gdal的编译和问题解决 这是gdal可能会用到的额外的包，按自己需要先提前编译。 这里的话我主要用了proj,Libtiff,Geotiff,Geos,Hdf5这5个包，基本能满足需要 安装步骤 新建一个安装目录
阅读全文
摘要：anmu 是一个开源的直播平台弹幕接口，使用他没什么基础的你也可以轻松的操作各平台弹幕。使用不到三十行代码，你就可以使用Python基于弹幕进一步开发。支持斗鱼、熊猫、战旗、全民、Bilibili多平台弹幕。支持各版本Python，无平台依赖，方便各类开发者、爱好者使用。一次开启，主播上线自动连接，
阅读全文
摘要：使用python会出现各种各样的错误，以下是Python常见的错误以及解决方法。 1.ValueError: ‘Conv2d_1a_3×3’ is not a valid scope name 这个是刚遇到的问题，在LZ自己手打Inception net的时候，想赋一个名字的时候出错，其实这就是命名
阅读全文
摘要：Python 类型系统的特点是拥有强大、灵活的类型操作. 维基百科上对此作出的阐述. 而存在一个不争而有趣的事实是， Python 是比Java更加强类型的. Java 对于原生类型和对象区分了类型系统，它让null存在于一个灰色地带. 另一方面，现代的 Python 拥有一个统一的强类型系统, 其
阅读全文
摘要：编程语言：python(3.6.4) 主要应用的模块：pygame （下面有源码，但是拒绝分享完整的源码，下面的代码整合起来就是完整的源码） 首先列出我的核心思路： 1，图像由“核心变量”完全控制，图像变化的本质是 变量的改变 2，自上而下式的思考，图像变化的问题将一步步转为 一系列具体的变量修改
阅读全文
摘要：我们提供一个初学者最好的Python书籍列表。Python是一个初级程序员可以学习编程的最友好语言之一。为了帮助您开始使用Python编程，我们分享此列表。泡一杯茶，选一本书阅读，开始使用Python编程！ Python编程：从入门到实践 本书是一本针对所有层次的Python 读者而作的Python
阅读全文
摘要：由于最新的视频整顿风波，内涵段子APP被迫关闭，广大段友无家可归，但是最近发现了一个“段友”的app，版本更新也挺快，正在号召广大段友回家，如下图，有兴趣的可以下载看看（ps：我不是打广告的，没收广告费的） 同时，之前同事也发了一个贴吧的段子聚居地，客官稍等，马上奉上连接： "段友之家" "http
阅读全文
摘要：很多人学习Python很长时间，对于'hello word' 的认知，很多已经从事Python多年的程序员的认知也就只有: hello word
阅读全文
摘要：每年全球都要花费数十亿美元来预防疾病，减少死亡，资助预防保健及治疗的各种研发项目，以及其他的健康方案。但资金毕竟是有限的，所以一些组织，比如全球卫生资金的主要捐助者比尔&梅林达·盖茨基金会（Billand Melinda Gates Foundation），需要考虑优先把钱花在那儿。华盛顿大学健康指
阅读全文
摘要：Python和Ruby在网络上一决雌雄，大多数人认为“Web开发语言之战”必有分晓。
随着磁存储设备价格暴跌，存储大量数据以供日后分析变得可行（因为数据已经变得很廉价，最好是先把数据保存起来，甚至都不需要去考虑具体要分析什么。）
对新一代程序员的需求发生变化：具有统计学背景，最好还得有应用数学背景的，且先前有过一些编程经验的程序员开始被哄抢——数据科学家的时代来临了！
数据科学家们想寻找一种既具有表现力又快速的语言（具有良好的数值计算库支持启动），所有的这些需求都指向于Python
后来，就如我们看到的那样，Python受到万千宠爱，一跃成为了最受欢迎的编程语言。
阅读全文
摘要：这三种语言中的哪一种更合适你的项目？很大程度取决于你想达到什么样的目标。作为一书的结尾，在这一节里，我会描述一下它们各自的优点和不足。 Python的优点和不足 Python的优点如下： 1. Python比其它语言有更多扩展模块。 2.在网上可以找到很多Python教程。不仅如此，还有大量的英文书
阅读全文
摘要：1、安装python3，怎么装不用我说了吧。安装包可以去这里http://www.python.org/download下载。
2、安装eclipse，下载之后解压就可以了。（eclipse和pydev最好用比较新的版本，否则可能会有问题 ）
3、安装Pydev，因为pydev是eclipse的一个插件，因此实际就是怎么给eclipse装插件了，将Pydev解压后有两个文件夹，如果所示。
安装方式有两种，
一种是分别直接将Pydev文件夹下的features和plugins里面的所有文件拷贝到eclipse目录下对应的features和plugins目录中，拷贝完成，安装也就完成了。第二种是用links文件的方法，在eclipse的安装目录下建一个links文件夹，如果没有的话，然后在links目录里面新建一个扩展名为.link的文件，假如叫xxpydev.link，名字可以随意取，然后把pydev解压到硬盘上，最好和eclipe放在一起咯，假如你放在D:/Program Files/MyEclipse 5.5.1 GA/org.python.pydev.feature-1_3
阅读全文
摘要：Although practicality beats purity.
（不要包容所有错误，除非你确定需要这样做（精准地捕获异常，不写 except:pass 风格的代码））
Errors should never pass silently.
（当存在多种可能，不要尝试去猜测）
Unless explicitly silenced.
（而是尽量找一种，最好是唯一一种明显的解决方案（如果不确定，就用穷举法））
In the face of ambiguity, refuse the temptation to guess.
阅读全文
浙公网安备 33010602011771号