GordonDicaprio - 博客园

2017年12月10日

Scrapy爬虫入门教程十三 Settings（设置） settings from_crawler

摘要： Scrapy爬虫入门教程十三 Settings（设置）阅读全文

posted @ 2017-12-10 17:47 GordonDicaprio 阅读(606) 评论(0) 推荐(0)

scrapy爬虫框架将数据保存Mysql数据库中

摘要： scrapy爬虫框架将数据保存Mysql数据库中阅读全文

posted @ 2017-12-10 17:37 GordonDicaprio 阅读(298) 评论(0) 推荐(0)

篇三：XPath--解析Html

摘要：篇三：XPath--解析Html 阅读全文

posted @ 2017-12-10 16:31 GordonDicaprio 阅读(109) 评论(0) 推荐(0)

黄哥漫谈Python 生成器。

摘要：黄哥漫谈Python 生成器。阅读全文

posted @ 2017-12-10 10:40 GordonDicaprio 阅读(204) 评论(0) 推荐(0)

2017年12月9日

scrapy 报错 no module named win32api 的解决方案

摘要：解决方案：原因是缺少win32,到 http://sourceforge.net/projects/pywin32/files/ 找到对应的版本进行下载，直接安装即可 Python是没有自带访问windows系统API的库的，需要下载。库的名称叫pywin32，可以从网上直接下载。以下链接地址可阅读全文

posted @ 2017-12-09 22:48 GordonDicaprio 阅读(972) 评论(0) 推荐(0)

Scrapy安装错误：Microsoft Visual C++ 14.0 is required

摘要：问题描述当前环境win10，python_3.6.1，64位。在windows下，在dos中运行pip install Scrapy报错：解决方案 http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 下载twisted对应版本的whl文件（如我阅读全文

posted @ 2017-12-09 22:41 GordonDicaprio 阅读(441) 评论(0) 推荐(0)

机器人排除标准 robot.txt robot exclusion standard

摘要： 18.2 什么是机器人排除标准《搜索引擎优化宝典(第2版)》第18章机器人、蜘蛛和爬虫，本章主要的内容有：什么是机器人、爬虫和蜘蛛；什么是机器人排除标准; Robots 元标签；用XML 网站地图使网页被收录。本节为大家介绍什么是机器人排除标准虫。作者：马煜译来源：清华大学出版社|2010-0 阅读全文

posted @ 2017-12-09 22:21 GordonDicaprio 阅读(914) 评论(0) 推荐(0)

yield - python

摘要： Python yield 使用浅析彻底理解Python中的yield 阅读全文

posted @ 2017-12-09 21:42 GordonDicaprio 阅读(136) 评论(0) 推荐(0)

2017年12月8日

Java中间缓存变量机制

摘要： http://blog.csdn.net/fshxmb1991/article/details/40078509 阅读全文

posted @ 2017-12-08 16:46 GordonDicaprio 阅读(166) 评论(0) 推荐(0)

Scrapy documentation

摘要： https://docs.scrapy.org/en/latest/ 阅读全文

posted @ 2017-12-08 12:23 GordonDicaprio 阅读(113) 评论(0) 推荐(0)

Beautiful Soup-4.2.0

摘要： https://www.crummy.com/software/BeautifulSoup/bs4/doc/index.zh.html 阅读全文

posted @ 2017-12-08 12:20 GordonDicaprio 阅读(225) 评论(0) 推荐(0)

PyEcharts

摘要：网站事例：http://pyecharts.herokuapp.com/ 源码：https://github.com/chenjiandongx/pyecharts 文档：https://github.com/chenjiandongx/pyecharts/blob/master/docs/zh-c 阅读全文

posted @ 2017-12-08 11:37 GordonDicaprio 阅读(342) 评论(0) 推荐(0)

Python - 连接msql数据库

摘要：可能出现的异常：python中出现SyntaxError: Non-UTF-8 code 解决方法刚开始一直有用idle写代码，今天用了一下PyDev结果发现中文不支持，在网上搜了一下，结果发现解决方法都写得比较乱，自己写一个记录一下。 1.把相应Python程序文件的编码转成UTF-8格式就可以阅读全文

posted @ 2017-12-08 11:32 GordonDicaprio 阅读(387) 评论(0) 推荐(0)

更换pip源到国内镜像

摘要：更换pip源到国内镜像阅读全文

posted @ 2017-12-08 09:48 GordonDicaprio 阅读(97) 评论(0) 推荐(0)

Urllib3 库详解

摘要：文档：http://urllib3.readthedocs.io/en/latest/ 阅读全文

posted @ 2017-12-08 09:48 GordonDicaprio 阅读(171) 评论(0) 推荐(0)

我最常用的Elipse快捷键

摘要：我最常用的Elipse快捷键阅读全文

posted @ 2017-12-08 00:48 GordonDicaprio 阅读(174) 评论(0) 推荐(0)

python+Eclipse+pydev环境搭建

摘要： python+Eclipse+pydev环境搭建阅读全文

posted @ 2017-12-08 00:37 GordonDicaprio 阅读(99) 评论(0) 推荐(0)

2017年12月6日

python下实现汉诺塔

摘要： python下实现汉诺塔阅读全文

posted @ 2017-12-06 16:22 GordonDicaprio 阅读(151) 评论(0) 推荐(0)

2017年12月5日

FastDFS 安装步骤

摘要： nginx01 121nginx02 122tracker01 131tracker02 132storage01 141storage02 142storage03 143storage04 144libfastcommon.so默认安装到了/usr/lib64/libfastcommon.so，阅读全文

posted @ 2017-12-05 17:35 GordonDicaprio 阅读(280) 评论(0) 推荐(0)

2017年12月3日

Lombok介绍及使用方法

摘要： Lombok介绍及使用方法阅读全文

posted @ 2017-12-03 22:08 GordonDicaprio 阅读(136) 评论(0) 推荐(0)

ECharts-Java使用Java快速开发ECharts图表

摘要： ECharts-Java使用Java快速开发ECharts图表阅读全文

posted @ 2017-12-03 21:29 GordonDicaprio 阅读(4603) 评论(1) 推荐(0)

Python - 装饰器

摘要： output: 阅读全文

posted @ 2017-12-03 20:44 GordonDicaprio 阅读(280) 评论(0) 推荐(0)

2017年12月2日

FastDFS FAQ （欢迎反馈，我将及时整理）

摘要： FastDFS FAQ （欢迎反馈，我将及时整理）阅读全文

posted @ 2017-12-02 17:18 GordonDicaprio 阅读(197) 评论(0) 推荐(0)

使用FastDFS的内置防盗链功能

摘要：使用FastDFS的内置防盗链功能阅读全文

posted @ 2017-12-02 17:07 GordonDicaprio 阅读(1037) 评论(0) 推荐(0)

2017年12月1日

fastdfs-nginx扩展模块源码分析

摘要： fastdfs-nginx扩展模块源码分析阅读全文

posted @ 2017-12-01 18:56 GordonDicaprio 阅读(121) 评论(0) 推荐(0)

负载均衡的基础技术种类

摘要：负载均衡的基础技术种类负载均衡实现应用服务器伸缩性 1、 HTTP重定向负载均衡利用HTTP重定向协议实现负载均衡。如下图所示： HTTP重定向负载均衡原理 HTTP重定向服务器是一台普通的应用服务器，其唯一的功能就是根据用户的HTTP请求计算一台真实的Web服务器地址，并将该Web服务器地址写阅读全文

posted @ 2017-12-01 18:32 GordonDicaprio 阅读(153) 评论(0) 推荐(0)

scp基本使用方法

摘要： scp基本使用方法： scp用于在两台电脑之间进行数据的copy，形式如下：第一种， scp [-r] 文件/文件夹 user@host:dir ，需要输入密码。第二种， scp [-r] 文件/文件夹 host:dir，需要输入用户名和密码。举例： 1. copy 文件： scp frame 阅读全文

posted @ 2017-12-01 09:06 GordonDicaprio 阅读(8371) 评论(0) 推荐(0)

给linux添加yum源。

摘要：给linux添加yum源。阅读全文

posted @ 2017-12-01 00:59 GordonDicaprio 阅读(164) 评论(0) 推荐(0)

2017年11月30日

Linux 克隆虚拟机引起的“Device eth0 does not seem to be present, delaying initialization”

摘要： Linux 克隆虚拟机引起的“Device eth0 does not seem to be present, delaying initialization” 虚拟机Vmware上克隆了一个Red Hat Enterprise Linx启动时发现找不到网卡，如下所示，如果你在命令窗口启动网络服务就阅读全文

posted @ 2017-11-30 21:12 GordonDicaprio 阅读(245) 评论(0) 推荐(0)

2017年11月28日

FastDFS-单机版安装

摘要：转载自：搭建单机版的FastDFS服务器 * 为了便于理解，其中顺序有改变。 1、第八步创建软链接，可以等到第九步结束后进行。如果提前在第八步创建软链接，因为还没有安装 libfdfsclient.so文件，则创建软链接时会提示此文件不存在，但是不影响创建软链接。 2、如果等到第九步完成之后在进阅读全文

posted @ 2017-11-28 13:37 GordonDicaprio 阅读(274) 评论(0) 推荐(0)

2017年11月24日

已安装nginx动态添加模块

摘要：已安装nginx动态添加模块在已经安装Nginx的基础上增加新Nginx-echo模块安装成功的nginx如何添加未编译安装模块 nginx入门学习—— 在已安装好的nginx上添加sticky模块（二）阅读全文

posted @ 2017-11-24 22:36 GordonDicaprio 阅读(185) 评论(0) 推荐(0)

FastDFS - 文件服务器学习资料

摘要： FastDFS搭建及java整合代码 CentOS 6.5下 FastDFS结合Nginx插件实现图片http访问图片服务器fastDFS的搭建以及配置 nginx fastdfs 配置后上传成功但访问报404 bad request 两种解决方法使用FastDFS搭建图片服务器单实例篇使阅读全文

posted @ 2017-11-24 21:56 GordonDicaprio 阅读(256) 评论(0) 推荐(0)

七、CentOS 6.5 下 Nginx的反向代理和负载均衡的实现

摘要： CentOS 6.5 下 Nginx的反向代理和负载均衡的实现 * 修复上面文章的问题：复制出一个tomcat2之后，修改service.xml文件时，要修改三个端口： 1、 2、 3、 * 修复上面文章的问题：测试负载均衡时，不要刷新，一定要将鼠标点进地址栏，回车：阅读全文

posted @ 2017-11-24 20:22 GordonDicaprio 阅读(309) 评论(0) 推荐(0)

www.xxx.com 与 m.xxx.com 的Nginx服务器实现

摘要：六、CentOS 6.5 下Nginx的配置阅读全文

posted @ 2017-11-24 19:46 GordonDicaprio 阅读(22483) 评论(0) 推荐(0)

六、CentOS 6.5 下Nginx的配置

摘要： CentOS 6.5 下Nginx的配置阅读全文

posted @ 2017-11-24 19:15 GordonDicaprio 阅读(415) 评论(0) 推荐(0)

五、CentOS 6.5 下启动和停止Nginx

摘要： CentOS 6.5 下启动和停止Nginx 阅读全文

posted @ 2017-11-24 18:55 GordonDicaprio 阅读(1087) 评论(0) 推荐(0)

四、CentOS 6.5 上传和安装Nginx

摘要： CentOS 6.5 上传和安装Nginx 阅读全文

posted @ 2017-11-24 18:24 GordonDicaprio 阅读(134) 评论(0) 推荐(0)

三、安装Nginx依赖的包到CentOS 6.5

摘要：安装Nginx依赖的包到CentOS 6.5 阅读全文

posted @ 2017-11-24 18:15 GordonDicaprio 阅读(744) 评论(0) 推荐(0)

二、Linux 静态IP,动态IP配置

摘要： Linux 静态IP,动态IP配置第一步：激活网卡系统装好后默认的网卡是eth0，用下面的命令将这块网卡激活。 # ifconfig eth0 up 第二步：设置网卡进入系统时启动想要每次开机就可以自动获取IP地址上网，就要设置网络服务在系统启动时也启动。Linux有一点与windows不同的阅读全文

posted @ 2017-11-24 18:13 GordonDicaprio 阅读(835) 评论(0) 推荐(0)

一、VM8.0 + CentOS 6.5 连接网络

摘要： VM8.0 + CentOS 6.5 连接网络 VM8.0 + CentOS 6.5 连接网络阅读全文

posted @ 2017-11-24 17:42 GordonDicaprio 阅读(128) 评论(0) 推荐(0)

Archibald Witwicky