03 2015 档案

Python 学习笔记
摘要：1.关于理解测试模块的概念，if __name__ == "__main__":模块是对象，并且所有的模块都有一个内置属性__name__。一个模块的__name__的值取决于您如何应用模块。如果import模块，那么__name__的值通常为模块的文件名，不带路径或者文件扩展名。但是您也可以像一个... 阅读全文
posted @ 2015-03-24 11:09 西番莲果汁 阅读(137) 评论(0) 推荐(0)
利用python scrapy 框架抓取豆瓣小组数据
摘要：因为最近在找房子在豆瓣小组-上海租房上找，发现搜索困难，于是想利用爬虫将数据抓取. 顺便熟悉一下Python.这边有scrapy 入门教程出处：http://www.cnblogs.com/txw1958/archive/2012/07/16/scrapy-tutorial.html差不多跟教程说的... 阅读全文
posted @ 2015-03-23 16:48 西番莲果汁 阅读(865) 评论(0) 推荐(0)
scrapy 错误
摘要：1. 安装win32时候Unable to find vcvarsall.bat解决方法：1.如果你没有安装vc，去微软下个 VS2008 的免费版就能解决此问题。2.如果你安装的是VS2010，恭喜你，python的安装功能暂不支持。 不过也不是无法解决。 打开“\Lib\distutils\ms... 阅读全文
posted @ 2015-03-22 19:04 西番莲果汁 阅读(212) 评论(0) 推荐(0)
python 安装scrapy
摘要：1. 首先你先得安装PYTHON。。。还是推荐2.7吧，之前装了3.3似乎和这个世界格格不入...先装个2.7. 并将python加入系统的环境变量.2. 去scrapy 官网下载最新版本的scrapy. http://scrapy.org/doc/cmd 切换到scrapy 的目录,运行目录下的s... 阅读全文
posted @ 2015-03-22 17:27 西番莲果汁 阅读(252) 评论(0) 推荐(0)
Python 抓取网页乱码问题 以及EXCEL乱码
摘要：import codecs f1=codecs.open('items.json', 'r', encoding='utf-8').read().decode("unicode_escape") f=codecs.open('out.txt','wb',encoding='utf-8') print 阅读全文
posted @ 2015-03-20 16:44 西番莲果汁 阅读(698) 评论(0) 推荐(0)
POC - ASP.NET & MYSQL部分
摘要：1. ASP.NET 用MYSQL是需要引入MYSQL的包的，这个在VS的TOOLS-> extension manager里可以搜到的2. 接下来是WEBCONFIG里的配置信息 3.MYSQL C#连接代码string strConn = ConfigurationManager.Co... 阅读全文
posted @ 2015-03-19 21:29 西番莲果汁 阅读(163) 评论(0) 推荐(0)
POC - ASP.NET & IIS 部分
摘要：终于得到了我VM的管理员权限啦啦。接下来不需要把IIS架在我自己的电脑上了，将架在我的VM上。1. 先添加ISAP和CGI的组件。2. 将defaultAppPool的MODE设为CLASSIC,并且到ISAPI and CGI Restrictions里将 ASP.NET V4.0 给allowe... 阅读全文
posted @ 2015-03-19 20:55 西番莲果汁 阅读(207) 评论(0) 推荐(0)
最近对python颇有兴趣
摘要：因为最近租的房子到期了，于是在豆瓣小组找房子，萌生利用python爬虫去抓取小组的房源信息。最近2个小玩意准备做一下，mark 一下1.豆瓣租房小组Python爬虫抓取2.51job 职位抓取 阅读全文
posted @ 2015-03-19 14:44 西番莲果汁 阅读(256) 评论(0) 推荐(0)
ASP.NET&AJAX&JSON - 动态读取数据
摘要：因为之前帮WM组做了一个delivery的dashboard,大概用了3周的时间，.net也忘了差不多了，ajax和highchart表也是现学的，蛮费劲！总算也搞出来了。发帖纪录一下。1. 前台ASPX页面(下面ajax的代码可以存在与某个JS事件中触发，将其包含在事件代码里)$.getJSON(... 阅读全文
posted @ 2015-03-19 14:16 西番莲果汁 阅读(1560) 评论(0) 推荐(0)
ggplot2 学习笔记 (持续更新.....)
摘要：1. 目前有四种主题theme_gray(), theme_bw() , theme_minimal(),theme_classic()2. X轴设置刻度scale_x_continuous(limits=c(1950,2000),breaks=seq(1950,2000,5))3. Bar & L... 阅读全文
posted @ 2015-03-19 14:02 西番莲果汁 阅读(327) 评论(0) 推荐(0)
MYSQL与 R
摘要：1. 配置MySQL ODBC必须先安装MySQL ODBC driver下载地址可以为：http://www.mysql.com/downloads/connector/odbc/2. 控制面板\系统和安全\管理工具 选择 “数据源(ODBC)”tips: 中文乱码问题，odbc有2个驱动，选择A... 阅读全文
posted @ 2015-03-19 13:53 西番莲果汁 阅读(371) 评论(0) 推荐(0)
R 语言中文乱码问题
摘要：R 语言似乎在WINDOWS平台上对中文的支持不是特别好，似乎是3.1.2的一个BUG。目前我研究出了一个临时解决方案,你可以将代码编写成一个函数，从而在调用的过程中不必如下繁琐：1. 先将本地语言集转换成English 1252:　Sys.setlocale(category="LC_ALL", ... 阅读全文
posted @ 2015-03-19 13:48 西番莲果汁 阅读(1262) 评论(0) 推荐(0)
R语言的学习笔记 (持续更新.....)
摘要：1. DATE 处理1.1 日期格式一个是as.Date(XXX) 和strptime(XXX)，前者为Date格式，后者为POSIXlt格式1.2 用法：as.Date(XXX,"%Y/%m/%d %H:%M") ，strptime(XXX, format="%m%d%Y %H:%M")1.3格式... 阅读全文
posted @ 2015-03-19 13:38 西番莲果汁 阅读(600) 评论(0) 推荐(0)