Fate0729

摘要： 思维导图 一、大型网站系统特点 （1）高并发、大流量：PV流量巨大 （2）高可用：7*24小时不间断服务 （3）海量数据：文件数目分分钟XXTB （4）用户分布广泛：网络情况复杂 （5）安全环境恶劣：黑客的攻击 （6）需求快速变更，发布频繁：快速适应市场，满足用户需求 （7）渐进式发展：慢慢的运营出 阅读全文

摘要： 本博主要总结DaraFrame数据筛选方法（loc,iloc,ix,at,iat），并以操作csv文件为例进行说明 1. 数据筛选 （1）单条件筛选 （2）多条件筛选 可以使用&（并）与| （或）操作符或者特定的函数实现多条件筛选 （3）索引筛选 a. 切片操作 df[行索引，列索引]或df[[列名 阅读全文

摘要： Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛。 框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。 Scrapy 使用了 Twisted异步网络框架来处理网络通讯，可以加快我们的下载速度， 阅读全文

摘要： 1、简介 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。官方解释如下： Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代 阅读全文

摘要： 注：博客转载自：https://www.cnblogs.com/zhangxinqi/p/7687862.html 1、python3日期和时间 Python 程序能用很多方式处理日期和时间，转换日期格式是一个常见的功能。 Python 提供了一个 time 和 calendar 模块可以用于格式化 阅读全文