摘要：
Unsupervised learning https://scikit-learn.org/stable/tutorial/statistical_inference/unsupervised_learning.html 无监督学习的目的是， 寻找数据的表示。 探索数据的结构。 seeking r
阅读全文
posted @ 2021-01-03 23:47
lightsong
阅读(178)
推荐(0)
摘要：
Model selection https://scikit-learn.org/stable/tutorial/statistical_inference/model_selection.html#score-and-cross-validated-scores 模型选择，包括两个部分： （1）选
阅读全文
posted @ 2021-01-03 22:59
lightsong
阅读(153)
推荐(0)
摘要：
统计学习 https://scikit-learn.org/stable/tutorial/statistical_inference/index.html 数据量不停增加，增加了机器学习的重要性。 机器学习可以处理 预测 分类 学习非标记的数据结构。 统计学习使用机器学习技术，达成统计推断目标，
阅读全文
posted @ 2020-12-31 17:10
lightsong
阅读(188)
推荐(0)
摘要：
Multiclass and multioutput algorithms https://scikit-learn.org/stable/modules/multiclass.html# sklearn 支持如下典型类型学习 multiclass -- 多类别 mulitlabel -- 多标签
阅读全文
posted @ 2020-12-30 17:12
lightsong
阅读(359)
推荐(0)
摘要：
multilabel https://scikit-learn.org/stable/modules/multiclass.html#multilabel-classification 多标记， 对于一个样本数据， 多个可能的标签。 例如， 一段文本或者视频， 可能关于 宗教 政治 金融 教育 其中
阅读全文
posted @ 2020-12-30 15:50
lightsong
阅读(462)
推荐(0)
摘要：
multiclass https://scikit-learn.org/stable/modules/multiclass.html#multiclass-classification 多类分类面向的目标是，多余两类的， 每一个样本只能被分为一类。 区别于二值分类， 其目标类别有多个。 Multic
阅读全文
posted @ 2020-12-29 17:37
lightsong
阅读(314)
推荐(0)
摘要：
concept https://scikit-learn.org/stable/modules/preprocessing_targets.html#preprocessing-targets 对于监督性学习，其目标值需要进行转化，才能作为模型的目标，或者更加有效地适应模型。 These are t
阅读全文
posted @ 2020-12-28 16:45
lightsong
阅读(114)
推荐(0)
摘要：
由来 https://scikit-learn.org/stable/auto_examples/classification/plot_digits_classification.html#sphx-glr-auto-examples-classification-plot-digits-clas
阅读全文
posted @ 2020-12-22 13:08
lightsong
阅读(182)
推荐(0)
摘要：
Classification report The classification_report function builds a text report showing the main classification metrics. Here is a small example with cu
阅读全文
posted @ 2020-12-21 15:47
lightsong
阅读(249)
推荐(0)
摘要：
Confusion Matrix https://machinelearningmastery.com/confusion-matrix-machine-learning/ 混淆矩阵是一种总结分类算法性能的技术。 如果单独看正确率，很有可能掩盖了一些小数据量的类的情况。换句话说分类的数据是不均衡的，
阅读全文
posted @ 2020-12-21 15:04
lightsong
阅读(661)
推荐(0)
摘要：
conception https://scikit-learn.org/stable/auto_examples/cluster/plot_color_quantization.html#sphx-glr-auto-examples-cluster-plot-color-quantization-p
阅读全文
posted @ 2020-12-17 16:31
lightsong
阅读(172)
推荐(0)
摘要：
datasets sklearn提供了一些内置的小的玩具数据。 也可以加载外部的一些数据。 节省招数据的过程。 The sklearn.datasets package embeds some small toy datasets as introduced in the Getting Start
阅读全文
posted @ 2020-12-17 15:18
lightsong
阅读(176)
推荐(0)
摘要：
naive bayes 首先贝叶斯定理是定义 目标分类 和 依赖特征之间的概率转换关系的原理。 其次naive是朴素的意思， 依赖的特征可能是多个，但是多个特征之间可能依赖， 朴素的含义，是假设这些特征的依赖是不存在的。 朴素贝叶斯在实际应用中效果很好， 尽管特征之间是存在依赖关系的。 refere
阅读全文
posted @ 2020-12-16 17:06
lightsong
阅读(222)
推荐(0)
摘要：
What？ https://www.citrix.com/zh-cn/glossary/what-is-cloud-native.html 云原生是一种方法，用于构建和运行云应用，跨越私有云，公有云和混合云。 云原生应用，开发和管理都在云环境中。 越来越多的公司使用云原生开发，可以加速应用发布，到达
阅读全文
posted @ 2020-12-11 16:08
lightsong
阅读(120)
推荐(0)
摘要：
50projects50days 50 unique mini-projects to sharpen your HTML, CSS & JavaScript skills https://github.com/bradtraversy/50projects50days #ProjectLive D
阅读全文
posted @ 2020-12-04 10:25
lightsong
阅读(135)
推荐(0)
摘要：
Module Search https://docs.python.org/3/tutorial/modules.html#the-module-search-path 当使用import语句时， 首先解析器会寻找内置的模块， 例如 os， sys 然后在sys.path路径列表中搜索 此列表由如下
阅读全文
posted @ 2020-11-30 17:06
lightsong
阅读(152)
推荐(0)
摘要：
asyncio https://docs.python.org/3.7/library/asyncio.html 异步编程库。 支持并发运行。 提供一些高层API， asyncio is a library to write concurrent code using the async/await
阅读全文
posted @ 2020-11-25 12:27
lightsong
阅读(157)
推荐(0)
摘要：
multiprocessing -- python进程协同 https://docs.python.org/3.7/library/multiprocessing.html multiprocessing is a package that supports spawning processes u
阅读全文
posted @ 2020-11-24 12:11
lightsong
阅读(116)
推荐(0)
摘要：
data persistence https://docs.python.org/3.7/library/persistence.html 支持python内存中的数据以持久化的形式存储在磁盘中。 同时支持从磁盘中将数据恢复到内存中。 The modules described in this ch
阅读全文
posted @ 2020-11-19 16:06
lightsong
阅读(194)
推荐(0)
摘要：
statistics 统计模块支持普通的int float类型，还支持封装的 Decimal 和 Fraction的统计计算。 且输入数据的类型要保持一致。 统计功能分为两个部分： （1）均值和中心位置度量。-- 均值和中位数。 （2）延展度度量。-- 偏差和标准差。 https://docs.py
阅读全文
posted @ 2020-11-17 15:26
lightsong
阅读(155)
推荐(0)
摘要：
deque https://pymotw.com/2/collections/deque.html A double-ended queue, or deque, supports adding and removing elements from either end. The more comm
阅读全文
posted @ 2020-11-16 17:03
lightsong
阅读(128)
推荐(0)
摘要：
Queue for multiple processes 跟线程队列类似。 有三种队列： （1）Queue -- 普通队列 （2）SimpleQueue -- 简化队列，类似管道 （3）JoinableQueue -- 可观测队列。 https://docs.python.org/3.7/libra
阅读全文
posted @ 2020-11-16 15:59
lightsong
阅读(149)
推荐(0)
摘要：
queue https://docs.python.org/3.7/library/queue.html#queue.Queue 支持多生产者和多消费者。 为线程通信设计。 实现三种类型的队列： （1）FIFO （2）LIFO （3）优先队列 还有一个简单队列，是FIFO的一种易用性特例。 The
阅读全文
posted @ 2020-11-16 12:58
lightsong
阅读(152)
推荐(0)
摘要：
xmlrpc 允许软件在不同系统运行。实现计算和存储资源的共享。 http://xmlrpc.com/ It's a spec and a set of implementations that allow software running on disparate operating system
阅读全文
posted @ 2020-11-15 15:15
lightsong
阅读(121)
推荐(0)
摘要：
"Batteries-included" philosophy python版本，含有丰富和多功能的标准库。 不需要用户再去单独下载。 https://www.python.org/dev/peps/pep-0206/#batteries-included-philosophy The Python
阅读全文
posted @ 2020-11-12 17:10
lightsong
阅读(217)
推荐(0)
摘要：
pprint 对于非基本的数据类型， 即对象或者成员中含有对象的数据，print仅仅打印其对象基本信息，在一行中。不会打印数据内容。 如果想打印数据，则需要使用pprint模块。 此模块包括打印接口， 和打印类。 打印类用于定义打印格式， 提供复用。 https://docs.python.org/
阅读全文
posted @ 2020-11-07 01:08
lightsong
阅读(133)
推荐(0)
摘要：
enum 某个变量有若干有表征意义的离散值， 则可以考虑使用枚举。 例如系统运行错误码、HTTP状态码。 https://docs.python.org/3.5/library/enum.html An enumeration is a set of symbolic names (members)
阅读全文
posted @ 2020-11-07 00:50
lightsong
阅读(145)
推荐(0)
摘要：
weakref 赋值运算产生的对象的引用是 强 引用。强引用的存在， 会阻止垃圾回收器回收对象。 在某些场景下， 不希望由于特殊的引用，而不能回收内存。 例如缓存器 和 映射保持器， 这两个可以对大内存对象进行管理。 https://docs.python.org/3.5/library/weakr
阅读全文
posted @ 2020-11-06 16:53
lightsong
阅读(157)
推荐(0)
摘要：
copy https://docs.python.org/3.5/library/copy.html 复制运算并不做对象拷贝动作，仅仅是建立一个连接到原始对象。 如果希望生成一个新的对象，进行修改，不改变原始对象， 则需要拷贝模块。 拷贝模块提供 深浅拷贝功能。 Assignment stateme
阅读全文
posted @ 2020-11-06 16:18
lightsong
阅读(109)
推荐(0)
摘要：
bisect 在有序列表中执行二分查找和插入。 https://docs.python.org/3.5/library/bisect.html This module provides support for maintaining a list in sorted order without ha
阅读全文
posted @ 2020-11-06 16:03
lightsong
阅读(121)
推荐(0)
摘要：
collections.abc -- official 提供了一些抽象基础类，用于判断某个类是否含有某个接口。 抽象基础类有几个最原始的抽象类型： （1）容器 -- Container （2）可哈希 -- Hashable （3）容量 -- Sized （4）可调用 -- Callable （5）可
阅读全文
posted @ 2020-11-06 15:29
lightsong
阅读(697)
推荐(0)
摘要：
collections https://docs.python.org/3.5/library/collections.html 实现一些特殊的容器数据类型。 是对通用内置容器的替代， 例如 词典、列表、集合、元组。 特殊的含义是通用数据类型，在某些常用场景上，不满足，需要手动实现的一些特殊的编程模
阅读全文
posted @ 2020-11-05 17:04
lightsong
阅读(132)
推荐(0)
摘要：
heap https://stackoverflow.com/questions/19979518/what-is-pythons-heapq-module 堆不是二叉树。 堆以list方式存储。 堆不同于sorted list。 堆在插入和删除比sorted list更加高效。 搜索还是sorte
阅读全文
posted @ 2020-11-05 15:33
lightsong
阅读(154)
推荐(0)
摘要：
引子 在python中，存储序列数据（数组）， 可以在list中存储。 但是list中元素可以支持不同类型的元素。这带来了数据存储的不规则性，但是现实中往往数组元素都是一致的。list处理上效率就会降低。 LIST https://www.tutorialspoint.com/python/pyth
阅读全文
posted @ 2020-10-29 16:07
lightsong
阅读(161)
推荐(0)
摘要：
Assert -- 内置类UNIT TEST API https://realpython.com/python-testing/ You can write both integration tests and unit tests in Python. To write a unit test
阅读全文
posted @ 2020-10-27 17:01
lightsong
阅读(156)
推荐(0)
摘要：
事件驱动型 此工作流实际上产生于事件驱动软件架构， 将软件系统切分为若干独立运行的子系统（进程）， 每个子系统同时具有发送和接受事件消息的能力。 工作流定义依赖各个子系统发送和接受事件的定义， 分散在各个子系统中。 对于工作流管理流管理 优点： 松散耦合，扩展性好。 缺点： 工作流的总体拓扑没有总体
阅读全文
posted @ 2020-10-22 15:16
lightsong
阅读(1219)
推荐(0)
摘要：
Apache Airflow https://airflow.apache.org/ Airflow is a platform created by the community to programmatically author, schedule and monitor workflows.
阅读全文
posted @ 2020-10-20 16:20
lightsong
阅读(701)
推荐(0)
摘要：
DASK https://github.com/dask/dask https://dask.org/ DASK提供并行计算和任务调度能力。 集成和很多数据科学工具。 堪称数据科学家的SPARK. Dask provides advanced parallelism for analytics, e
阅读全文
posted @ 2020-10-16 14:27
lightsong
阅读(312)
推荐(0)
摘要：
Joblib https://joblib.readthedocs.io/en/latest/index.html https://github.com/joblib/joblib 轻量流水线工具 （1）对于记忆模式， 使用上是透明的，并且具有懒计算特性。 （2）对于简单的并行计算是容易的。 Job
阅读全文
posted @ 2020-10-14 17:01
lightsong
阅读(210)
推荐(0)
摘要：
Ray https://ray.io/ https://github.com/ray-project/ray （1）机器学习生态基于python语言，但是python具有全局解释器锁缺点，限制了对单台机器的多核的利用 （2）同时查大规模模型的数据的出现，需要依赖集群来解决类似问题，引入了分布式机器学
阅读全文
posted @ 2020-10-14 14:51
lightsong
阅读(461)
推荐(0)
浙公网安备 33010602011771号