| | | | |

2020年8月21日

摘要： import re import json from odps import ODPS from threading import Thread import threading from urllib import parse import datetime from lxml import et 阅读全文

posted @ 2020-08-21 18:10 老猫历险记阅读(220) 评论(0) 推荐(0)

2020年8月20日

去哪儿网更新setting文件

摘要： #去哪儿网爬虫数据库配置信息 from peewee import * import redis #mysql #db = MySQLDatabase("91jiafan", host="127.0.0.1", port=3306, user="root", password="123456") m 阅读全文

posted @ 2020-08-20 18:20 老猫历险记阅读(529) 评论(0) 推荐(0)

去哪儿网models数据更新

摘要： from settings import * class BaseModel(Model): class Meta: database = db #设计数据表的时候有几个重要点一定要注意 """ char类型，要设置最大长度对于无法确定最大长度的字段，可以设置为Text 设计表的时候采集到的数阅读全文

posted @ 2020-08-20 18:18 老猫历险记阅读(118) 评论(0) 推荐(0)

去哪儿网酒店数据启动程序更新

摘要： import re import json from odps import ODPS from threading import Thread import threading from urllib import parse import datetime from lxml import et 阅读全文

posted @ 2020-08-20 18:16 老猫历险记阅读(218) 评论(0) 推荐(0)

去哪儿网门票数据

摘要： import re import json from odps import ODPS from threading import Thread import threading from urllib import parse import datetime from lxml import et 阅读全文

posted @ 2020-08-20 18:14 老猫历险记阅读(118) 评论(0) 推荐(0)

2020年8月14日

去哪儿网setting文件

摘要： #去哪儿网爬虫数据库配置信息 from peewee import * import redis #mysql #db = MySQLDatabase("91jiafan", host="127.0.0.1", port=3306, user="root", password="123456") m 阅读全文

posted @ 2020-08-14 17:40 老猫历险记阅读(622) 评论(0) 推荐(0)

2020年7月21日

91家纺网本地版,没有odps代码模块，只有redis和mysql，数据库配置需要参考无odps版本的数据库配置

摘要： import re from threading import Thread import threading from urllib import parse from datetime import datetime import random import requests import ti 阅读全文

posted @ 2020-07-21 15:31 老猫历险记阅读(250) 评论(0) 推荐(0)

91家纺网本地版本定稿，thread版本,models

posted @ 2020-07-21 15:17 老猫历险记阅读(136) 评论(0) 推荐(0)

91家纺网本地版本定稿，thread版本，setting文件

摘要： #91家纺网爬虫数据库配置信息 from peewee import * import redis #mysql #db = MySQLDatabase("91jiafan", host="127.0.0.1", port=3306, user="root", password="123456") 阅读全文

posted @ 2020-07-21 15:16 老猫历险记阅读(359) 评论(0) 推荐(0)

91家纺网本地版本定稿，thread版本

摘要： import re from odps import ODPS from threading import Thread import threading from urllib import parse from datetime import datetime import random imp 阅读全文

posted @ 2020-07-21 15:14 老猫历险记阅读(232) 评论(0) 推荐(0)

2020年8月21日

2020年8月20日

2020年8月14日

2020年7月21日

公告