随笔分类 -  大数据

有关学习大数据笔记
Python的开源人脸识别库：离线识别率高达99.38%（附源码）
摘要：Python的开源人脸识别库：离线识别率高达99.38%（附源码） 转https://cloud.tencent.com/developer/article/1359073 11.11 智慧上云 云服务器企业新用户优先购，享双11同等价格 立即抢购 在这篇文章中： 人脸识别的过程 人脸识别分类 De 阅读全文
posted @ 2019-11-17 03:17 中国人醒来了 阅读(17043) 评论(0) 推荐(1)
WebDriver下载地址
摘要：WebDriver下载地址 http://chromedriver.storage.googleapis.com/index.html chromedriver版本支持的Chrome版本 v2.32 v59-61 v2.31 v58-60 v2.30 v58-60 v2.29 v56-58 v2.2 阅读全文
posted @ 2018-10-14 22:00 中国人醒来了 阅读(4531) 评论(0) 推荐(0)
github上传时出现error: src refspec master does not match any解决办法
摘要：问题产生背景：需要将本地的项目上传git管理 步骤： git init //把这个目录变成Git可以管理的仓库 git add . //不但可以跟单一文件，还可以跟通配符，更可以跟目录。一个点就把当前目录下所有未追踪的文件全部add了 git commit -m "first commit" //把 阅读全文
posted @ 2018-05-12 03:31 中国人醒来了 阅读(591) 评论(0) 推荐(0)
mongodb的几种启动方法
摘要：1 mongodb的几种启动方法 启动Mongodb服务有两种方式，前台启动或者Daemon方式启动，前者启动会需要保持当前Session不能被关闭，后者可以作为系统的fork进程执行，下文中的path是mongodb部署的实际地址。 1. 最简单的启动方式，前台启动，仅指定数据目录，并且使用默认的 阅读全文
posted @ 2018-05-05 11:31 中国人醒来了 阅读(1437) 评论(0) 推荐(0)
Windows10 下安装scrapy 日志
摘要：Windows10 下安装scrapy 日志 1.下载python3.6 2.添加python.exe和pip.exe的路径到系统环境变量path中 如c:\python36_64 C:\Python36_64\Scripts 3.更新pip python.exe -m pip install -- 阅读全文
posted @ 2018-05-03 18:08 中国人醒来了 阅读(200) 评论(0) 推荐(0)
Docker容器进入的4种方式
摘要：Docker容器进入的4种方式 在使用Docker创建了容器之后，大家比较关心的就是如何进入该容器了，其实进入Docker容器有好几多种方式，这里我们就讲一下常用的几种进入Docker容器的方法。 进入Docker容器比较常见的几种做法如下： 使用docker attach 使用SSH 使用nsen 阅读全文
posted @ 2018-04-30 18:48 中国人醒来了 阅读(325) 评论(0) 推荐(0)
Docker 配置固定IP及桥接的实现方法(转载)
摘要：这篇文章主要介绍了Docker 配置固定IP和桥接的实现方法的相关资料,这里详细介绍了Docker 的四种网络模式及如何实现桥接的案例，需要的朋友可以参考下 docker默认使用bridge模式，通过网桥连接到宿主机，而容器内部的ip则从网桥所在的ip段取未用的ip。这样做一个不方便的地方在于容器内 阅读全文
posted @ 2018-04-30 18:43 中国人醒来了 阅读(7364) 评论(0) 推荐(0)
docker容器中安装vim 、telnet、ifconfig, ping命令
摘要：在使用docker容器时，有时候里边没有安装vim，敲vim命令时提示说：vim: command not found，这个时候就需要安装vim，可是当你敲apt-get install vim命令时，提示： Reading package lists... Done Building depend 阅读全文
posted @ 2018-04-30 11:30 中国人醒来了 阅读(1209) 评论(0) 推荐(0)
macos下mongoDB 3.4.5 添加用户、设置权限
摘要：macos下mongoDB 3.4.5 添加用户、设置权限 在项目中需要根据项目运行环境访问，以不同的身份访问各自的db，所以研究了一下MongoDB的 需求： 给MongoDB添加两个用户分别用于开发环境和测试环境，两个用户分别访问不同的db并拥有db的最高权限。 解决步骤： 关闭权限验证、启动M 阅读全文
posted @ 2018-04-23 05:17 中国人醒来了 阅读(354) 评论(0) 推荐(0)
macos 下安装virtualenv,virtualenvwrapper,然后在pycharm中正常配置方法日志
摘要：1.安装virtualenv或virtualenvwrapper pip install virtualenv pip install virtualenvwraper 注意pip的版本号（查看 pip -V） 2.通过virtualenv配置不同的python虚拟环境 2.1首先通过which p 阅读全文
posted @ 2018-04-11 09:58 中国人醒来了 阅读(241) 评论(0) 推荐(0)
最全Python爬虫总结(转载)
摘要：[html] view plain copy 最近总是要爬取一些东西，索性就把Python爬虫的相关内容都总结起来了，自己多动手还是好。 （1）普通的内容爬取（2）保存爬取的图片/视频和文件和网页（3）普通模拟登录（4）处理验证码登录（5）爬取js网站（6）全网爬虫（7）某个网站的站内所有目录爬虫（ 阅读全文
posted @ 2018-04-06 05:47 中国人醒来了 阅读(519) 评论(0) 推荐(0)
Python 扩展技术总结(转)
摘要：一般来说，所有能被整合或导入到其他Python脚本中的代码，都可以称为扩展。你可以用纯Python来写扩展，也可以用C/C++之类的编译型语言来写扩展，甚至可以用java,C都可以来写 python扩展。Python的一大特点是，扩展和解释器之间的交互方式域普通的Python模块完全一样，Pytho 阅读全文
posted @ 2018-04-06 05:32 中国人醒来了 阅读(634) 评论(0) 推荐(0)
IPython3 notebook 成功配置Python2和Python3内核（Kernel）
摘要：1.首先通过python3的pip3安装ipython sudo pip3 install ipython 2.安装python 内核 python2: sudo pip2 install ipykernel python3: sudo pip3 install ipykernel 3.配置pyth 阅读全文
posted @ 2018-04-05 19:59 中国人醒来了 阅读(702) 评论(0) 推荐(0)
python虚拟环境搭建大全（转）
摘要：Pipenv & 虚拟环境 本教程将引导您完成安装和使用 Python 包。 它将向您展示如何安装和使用必要的工具，并就最佳做法做出强烈推荐。请记住， Python 用于许多不同的目的。准确地说，您希望如何管理依赖项可能会根据 您如何决定发布软件而发生变化。这里提供的指导最直接适用于网络服务 （包括 阅读全文
posted @ 2018-04-05 18:04 中国人醒来了 阅读(6258) 评论(0) 推荐(0)