摘要: 模拟登录,可以解决某些网站,必须要登录才能抓取的问题。 模拟登录就是要拿到网站的 cookie。 当爬虫程序进入网站开始抓取时数据时,爬虫的入口并不是 scrapy 给定的 pass ,而是 scrapy 封装好的 start_requests ,这个方法就是对 start_urls 执行 for 阅读全文
posted @ 2022-09-04 17:14 礼拜16 阅读(17) 评论(0) 推荐(0) 编辑
摘要: 项目开发时,为了不污染全局环境,通常会使用虚拟环境隔离工具: virtualenv virtualenvwrapper 是将所有的虚拟环境放在同一个目录下,方便管理,在使用shell配合小型开发工具就会非常方便。 下面以 win10 下安装虚拟环境包管理工具为例: 安装 1. 使用豆瓣源安装 用户为 阅读全文
posted @ 2022-08-18 22:33 礼拜16 阅读(25) 评论(0) 推荐(0) 编辑
摘要: 昨天把 Pycharm 安装好了,今天开始安装 mysql 数据库。 My Sql 如果电脑上第一次安装 my sql ,会让注册一个 Oracle 帐户,浏览器输入 :mysql for windows 就可以找到,新版本下载完整版 400 多M。 1. 选择只安装 mysql 2. 直接 nex 阅读全文
posted @ 2022-08-15 23:46 礼拜16 阅读(28) 评论(0) 推荐(0) 编辑
摘要: Pycharm 版本,这里使用的是专业版,支持 Win / Mac / Linux。 下面的地址可以直接下载各个版本的软件: 此安装包是官网直接复制过来的,大家也可以自己去官网下载: Pycharm下载链接:软件下载 Pycharm 安装教程:安装教程 我下载的是官方原版安装包,我的电脑系统是 Wi 阅读全文
posted @ 2022-08-14 22:25 礼拜16 阅读(139) 评论(0) 推荐(0) 编辑
摘要: 最近在开发 Shopify 独立站,不停的小步迭代,线上环境切换,不太方便,学习并记录 Shopify CLI 的配置方法,在本地搭建了开发环境,使用的编辑软件是 VS Code。 Shopify 的本地开发环境,区别于其它比如Vue等开发环境。我的理解是本地只是创建的一个 Shopify 开发模板 阅读全文
posted @ 2022-08-09 18:29 礼拜16 阅读(77) 评论(0) 推荐(0) 编辑
摘要: 公司odoo网站上线一段时间了,最近市场部提出要在登录页新增一个广告,布局呈左右结构,左边为广告,右边为 odoo 的默认登录页。 分析:这种调整,不涉及数据,仅改变布局。为保险起见,复制原 login 布局,重命名一个备份,在现在使用的登录界面中调整新布局。具体操作看下面的记录。 本地环境: Do 阅读全文
posted @ 2022-08-08 18:36 礼拜16 阅读(38) 评论(0) 推荐(0) 编辑
摘要: Snippets 是 odoo 中用来保存与制作静态代码块的页面,这个代码块可通过拖拽的形式加载到页面上,通过继承website.snippets实现。 使用 xml 页面模板,编写 odoo 结构代码: <?xml version='1.0' encoding='utf-8'?> <odoo> . 阅读全文
posted @ 2021-04-19 16:47 礼拜16 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 最近在看 [生财有术] 亦仁大大分享的一篇文章 [如何在百万级的数据里找到别人正在赚钱的项目] , 作者在里面用到一个分词技术,今天研究了,找数据的这个过程记录一下。 分词环境: # 安装 表格工具和分词工具 pip3 install xlwt pip3 install jieba 编辑器: VSC 阅读全文
posted @ 2021-04-16 17:50 礼拜16 阅读(381) 评论(0) 推荐(0) 编辑
摘要: 我们用的是企业版 odoo ,网站上线后,更改测试网站主题,需要使用 odoo 的测试环境。 odoo 测试环境 将 odoo 与 github 关联,通过更新 github 中的 odoo code ,来更改正式环境中的主题或代码块。 这是我们的测试地址:https://******-github 阅读全文
posted @ 2021-03-02 14:44 礼拜16 阅读(521) 评论(0) 推荐(0) 编辑
摘要: sections 我认为是页面中的某个独立的块,可以是一个静态资源,也可以是一个功能。 命名规则 某种情况下,它是一个代码的片断,在载入某个页面时,每个 section 都有一个 id。如果 section 的名称为 cart-template.liquid ,那么页面中的 id="shopify 阅读全文
posted @ 2020-12-30 17:49 礼拜16 阅读(734) 评论(0) 推荐(0) 编辑