python - 随笔分类 - tan_2810

用PMML实现机器学习模型的跨平台上线

摘要：在机器学习用于产品的时候，我们经常会遇到跨平台的问题。比如我们用Python基于一系列的机器学习库训练了一个模型，但是有时候其他的产品和项目想把这个模型集成进去，但是这些产品很多只支持某些特定的生产环境比如Java，为了上一个机器学习模型去大动干戈修改环境配置很不划算，此时我们就可以考虑用预测模型标阅读全文

posted @ 2019-12-05 16:11 tan_2810 阅读(438) 评论(0) 推荐(0)

win10 anaconda3 python3.6安装tensorflow keras tensorflow_federated详细步骤及在jupyter notebook运行指定的conda虚拟环境

摘要：本文链接：https://blog.csdn.net/weixin_44290661/article/details/1026789071. 安装tensorflow keras tensorflow_federated详细步骤因为tensorflow很多依赖及版本兼容性问题，卸载麻烦，所以我是新建阅读全文

posted @ 2019-10-31 17:03 tan_2810 阅读(1580) 评论(0) 推荐(0)

Hebye 深度学习中Dropout原理解析

摘要：1. Dropout简介 1.1 Dropout出现的原因在机器学习的模型中，如果模型的参数太多，而训练样本又太少，训练出来的模型很容易产生过拟合的现象。在训练神经网络的时候经常会遇到过拟合的问题，过拟合具体表现在：模型在训练数据上损失函数较小，预测准确率较高；但是在测试数据上损失函数比较大，预阅读全文

posted @ 2019-08-03 00:46 tan_2810 阅读(200) 评论(0) 推荐(0)

Setting up the data and the model

摘要：Table of Contents: Setting up the data and the model Data Preprocessing Weight Initialization Batch Normalization Regularization (L2/L1/Maxnorm/Dropou 阅读全文

posted @ 2019-08-02 23:24 tan_2810 阅读(354) 评论(0) 推荐(0)

Python控制函数运行时间

摘要：在某个Flask项目在做后端接口时需要设置超时响应，因为接口中使用爬虫请求了多个网站,响应时间时长时短。需要设置一个最大响应时间，时间内如果接口爬虫没跑完,直接返回请求超时。方法1:使用线程控制超时设置3s，线程调用函数运行2s，这里返回a的值2。方法2:使用信号模块signal(只能在un 阅读全文

posted @ 2019-07-24 10:55 tan_2810 阅读(1345) 评论(0) 推荐(0)

如何用python编写一个计时器的程序

摘要：python计时器的程序的代码和注释 import time as t #引入time模块 class MyTimer(): def __init__(self): #构造函数 self.unit = ['年','月','日','时','分','秒'] #设置时间单位 #设置一系列初始属性 self 阅读全文

posted @ 2019-07-24 10:19 tan_2810 阅读(7906) 评论(0) 推荐(0)

【Python学习笔记】Pandas库之DataFrame

摘要：1 简介 DataFrame是Python中Pandas库中的一种数据结构，它类似excel，是一种二维表。或许说它可能有点像matlab的矩阵，但是matlab的矩阵只能放数值型值（当然matlab也可以用cell存放多类型数据），DataFrame的单元格可以存放数值、字符串等，这和excel 阅读全文

posted @ 2019-06-18 14:20 tan_2810 阅读(1177) 评论(0) 推荐(0)

15个最受欢迎的Python开源框架

摘要：一、Django: Python Web应用开发框架 Django是一个开放源代码的Web应用框架，由Python写成。采用了MVC的软件设计模式，即模型M，视图V和控制器C。它最初是被开发来用于管理劳伦斯出版集团旗下的一些以新闻内容为主的网站的，即是CMS（内容管理系统）软件。并于2005年7月阅读全文

posted @ 2019-04-19 00:05 tan_2810 阅读(618) 评论(0) 推荐(0)

ipython快捷键操作及常用命令

摘要：Ipython shell命令- Ctrl-P 或上箭头键后向搜索命令历史中以当前输入的文本开头的命令- Ctrl-N 或下箭头键前向搜索命令历史中以当前输入的文本开头的命令- Ctrl-R 按行读取的反向历史搜索（部分匹配）- Ctrl-Shift-v 从剪贴板粘贴文本- Ctrl-C 中止当阅读全文

posted @ 2019-04-17 11:07 tan_2810 阅读(2384) 评论(0) 推荐(0)

Python异常(基础) except

摘要：为什么要异常处理机制:在程序调用层数较深时,向主调函数传递错误信息需要层层return 返回比较麻烦,用异常处理机制可以较简单的传送错误信息什么是错误错误是指由于逻辑或语法等导致一个程序已无法正常执行的问题什么是异常异常是程序出错时标识的一种状态当异常发生时，程序不会再向下执行，而转去调用此阅读全文

posted @ 2019-04-03 10:21 tan_2810 阅读(2536) 评论(0) 推荐(0)

python常用快捷键

摘要：最重要的快捷键1. ctrl+shift+A:万能命令行2. shift两次:查看资源文件新建工程第一步操作1. module设置把空包分层去掉,compact empty middle package2. 设置当前的工程是utf-8,设置的Editor-->File Encodings-->全部改阅读全文

posted @ 2019-04-02 18:53 tan_2810 阅读(626) 评论(0) 推荐(0)

【python】详解time模块功能asctime、localtime、mktime、sleep、strptime、strftime、time等函数以及时间的加减运算

摘要：在Python中，与时间处理相关的模块有：time、datetime以及calendar。学会计算时间，对程序的调优非常重要，可以在程序中狂打时间戳，来具体判断程序中哪一块耗时最多，从而找到程序调优的重心处。这里先来讲一个time模块。 time模块所包含的函数能够实现以下功能：获取当前的时间、操作阅读全文

posted @ 2019-04-02 10:28 tan_2810 阅读(710) 评论(0) 推荐(0)

sklearn中的交叉验证（Cross-Validation）

摘要：这个repo 用来记录一些python技巧、书籍、学习链接等，欢迎stargithub地址sklearn是利用python进行机器学习中一个非常全面和好用的第三方库，用过的都说好。今天主要记录一下sklearn中关于交叉验证的各种用法，主要是对sklearn官方文档 Cross-validation 阅读全文

posted @ 2019-03-25 18:35 tan_2810 阅读(500) 评论(0) 推荐(0)

scikit-learn 0.18中的cross_validation模块被移除

摘要：环境：scikit-learn 0.18 , python3 报出如下警告： from sklearn.grid_search import GridSearchCV /usr/lib/python3.4/site-packages/sklearn/cross_validation.py:44: D 阅读全文

posted @ 2019-03-25 18:31 tan_2810 阅读(1113) 评论(0) 推荐(0)

python logging模块

摘要：原文：http://www.cnblogs.com/dahu-daqing/p/7040764.html 1 logging模块简介 logging模块是Python内置的标准模块，主要用于输出运行日志，可以设置输出日志的等级、日志保存路径、日志文件回滚等；相比print，具备如下优点： 2 log 阅读全文

posted @ 2019-03-25 16:57 tan_2810 阅读(167) 评论(0) 推荐(0)

随机森林参数理解与调优

摘要：首先理解随机森林模型各参数的含义： class sklearn.ensemble.RandomForestRegressor(n_estimators=10, criterion=’mse’, max_depth=None, min_samples_split=2, min_samples_leaf 阅读全文

posted @ 2019-03-25 16:54 tan_2810 阅读(1507) 评论(0) 推荐(0)

kaggle 欺诈信用卡预测——Smote+LR

摘要：from：https://zhuanlan.zhihu.com/p/30461746 本项目需解决的问题本项目通过利用信用卡的历史交易数据，进行机器学习，构建信用卡反欺诈预测模型，提前发现客户信用卡被盗刷的事件。建模思路项目背景以上取自Kaggle官网对本数据集部分介绍（谷歌翻译），关于数据阅读全文

posted @ 2019-03-25 16:53 tan_2810 阅读(1029) 评论(0) 推荐(0)

一篇文章教你如何用 Python 记录日志

摘要：http://python.jobbole.com/89007/ 对一名开发者来说最糟糕的情况，莫过于要弄清楚一个不熟悉的应用为何不工作。有时候，你甚至不知道系统运行，是否跟原始设计一致。在线运行的应用就是黑盒子，需要被跟踪监控。最简单也最重要的方式就是记录日志。记录日志允许我们在开发软件的同时，阅读全文

posted @ 2019-03-25 16:51 tan_2810 阅读(158) 评论(0) 推荐(0)

python 读取 log日志的编码问题

摘要：1.我要读取log日志的”执行成功”的个数，log日志编码格式为GBK 2.显示报错，大致意思是说utf-8的代码不能解析log日志 3.后来想想把log日志用GBK编码读出来，写到新文件中，用utf-8编码，解决了问题。阅读全文

posted @ 2019-03-25 16:50 tan_2810 阅读(1225) 评论(0) 推荐(0)

评分卡系列（三）：分类学习器的评估

摘要：评分卡可以用来预测客户的好坏。当一个评分卡已经构建完成，并且有一组个人分数和其对应的好坏状态的数据时，我们想知道所构建的评分卡是否可靠？可靠程度如何？而这取决于如何去定义这个“好”字。一般有三种角度可以来评估：评分卡分类划分的准确程度，如错误率、准确率、召回率、F1 评分卡的判别能力，评估评分卡将阅读全文

posted @ 2019-03-25 16:34 tan_2810 阅读(764) 评论(0) 推荐(0)

随笔分类 - python