打赏

随笔分类 -  Python+人工智能

2.03_01_Python网络爬虫urllib2库
摘要：一：urllib2库的基本使用 所谓网页抓取，就是把URL地址中指定的网络资源从网络流中抓取出来。在Python中有很多库可以用来抓取网页，我们先学习urllib2。 urllib2 是 Python2.7 自带的模块(不需要下载，导入即可使用) urllib2 官方文档：https://docs. 阅读全文
posted @ 2018-05-10 16:50 QueryMarsBo 阅读(272) 评论(0) 推荐(0)
2.06_Python网络爬虫_正则表达式
摘要：一：爬虫的四个主要步骤 二：什么是正则表达式 正则表达式，又称规则表达式，通常被用来检索、替换那些符合某个模式(规则)的文本。 正则表达式是对字符串操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。 给 阅读全文
posted @ 2018-05-08 18:49 QueryMarsBo 阅读(356) 评论(0) 推荐(0)
2.04_Python网络爬虫_Requests模块
摘要：一：Requests: 让 HTTP 服务人类 虽然Python的标准库中 urllib2 模块已经包含了平常我们使用的大多数功能，但是它的 API 使用起来让人感觉不太好，而 Requests 自称 “HTTP for Humans”，说明使用更简洁方便。 Requests 唯一的一个非转基因的 阅读全文
posted @ 2018-05-07 14:45 QueryMarsBo 阅读(433) 评论(0) 推荐(0)
2.03_Python网络爬虫Http和Https
摘要：一：HTTP和HTTPS HTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法，以明文的形式传输，效率高，但是不安全 HTTPS（Hypertext Transfer Protocol over Secure Socket La 阅读全文
posted @ 2018-05-07 09:48 QueryMarsBo 阅读(1859) 评论(0) 推荐(0)
2.02_Python网络爬虫分类及其原理
摘要：一：通用爬虫和聚焦爬虫 根据使用场景，网络爬虫可分为 通用爬虫 和 聚焦爬虫 两种. 通用爬虫 通用网络爬虫是捜索引擎抓取系统（Baidu、Google、Yahoo等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。 通用搜索引擎（Search Engine）工作 阅读全文
posted @ 2018-05-07 09:40 QueryMarsBo 阅读(2925) 评论(0) 推荐(0)
2.01_Python网络爬虫概述
摘要：一：什么是网络爬虫 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取网络信息的程序或者脚本； 二：为什么要做网络爬虫？ 大数据时代，要进行数据分析，首先要有数据源，数据从何而来？ 在进行大数据分析或者进行数据挖掘的时候，数据源可以 阅读全文
posted @ 2018-05-06 22:28 QueryMarsBo 阅读(341) 评论(0) 推荐(0)
Django_06_项目完成
摘要：项目完成 基本知识点都学完了，接下来完成示例项目 现在还需要的代码包括三个方面，三个方面顺序不分先后 1.定义视图 2.定义URLconf 3.定义模板 1.定义视图 2.定义URLconf 3.定义模板 定义视图 编写booktest/views.py文件如下 定义URLconf 编写bookte 阅读全文
posted @ 2018-04-25 14:30 QueryMarsBo 阅读(171) 评论(0) 推荐(0)
Django_05_模板
摘要：模板 如何向请求者返回一个漂亮的页面呢？肯定需要用到html、css，如果想要更炫的效果还要加入js，问题来了，这么一堆字段串全都写到视图中，作为HttpResponse()的参数吗？这样定义就太麻烦了吧，因为定义字符串是不会出任何效果和错误的，如果有一个专门定义前端页面的地方就好了 解决问题的技术 阅读全文
posted @ 2018-04-24 09:46 QueryMarsBo 阅读(161) 评论(0) 推荐(0)
Django_04_视图
摘要：视图 后台管理页面做好了，接下来就要做公共访问的页面了 对于django的设计框架MVT，用户在URL中请求的是视图，视图接收请求后进行处理，并将处理的结果返回给请求者 使用视图时需要进行两步操作 1.定义视图 2.配置URLconf 1.定义视图 2.配置URLconf 1.定义视图 视图就是一个 阅读全文
posted @ 2018-04-24 09:12 QueryMarsBo 阅读(135) 评论(0) 推荐(0)
Django_03_后台管理
摘要：后台管理 站点分为内容发布和公共访问两部分 内容发布的部分由网站的管理员负责查看、添加、修改、删除数据，开发这些重复的功能是一件单调乏味、缺乏创造力的工作，为此，Django能够根据定义的模型类自动地生成管理模块 使用Django的管理模块，需要按照如下步骤操作 1.管理界面本地化 2.创建管理员 阅读全文
posted @ 2018-04-23 18:04 QueryMarsBo 阅读(212) 评论(0) 推荐(0)
Django_02_创建模型
摘要：一：ORM简介 ORM，全拼Object-Relation Mapping，中文意为对象-关系映射，是随着面向对象的软件开发方法发展而产生的。 面向对象的开发方法是当今企业级应用开发环境中的主流开发方法，关系数据库是企业级应用环境中永久存放数据的主流数据存储系统。对象和关系数据是业务实体的两种表现形 阅读全文
posted @ 2018-04-23 14:40 QueryMarsBo 阅读(387) 评论(0) 推荐(0)
Django_01_创建图书管理项目
摘要：在django中，项目的组织结构为一个项目包含多个应用，一个应用对应一个业务模块 示例：创建项目的名称为test1，完成“图书-英雄”信息的维护，创建应用名称为booktest 创建项目：首先进入到虚拟环境中：workon django_py2，在当前用户的某个目录下创建项目，这样不会发生权限问题， 阅读全文
posted @ 2018-04-23 08:41 QueryMarsBo 阅读(330) 评论(0) 推荐(0)
Djang简介
摘要：一：MVC简介 MVC的全拼为Model-View-Controller，最早由TrygveReenskaug在1978年提出，是施乐帕罗奥多研究中心(Xerox PARC)在20世纪80年代为程序语言Smalltalk发明的一种软件设计模式，是为了将传统的输入（input）、处理（processi 阅读全文
posted @ 2018-04-20 16:22 QueryMarsBo 阅读(387) 评论(0) 推荐(0)