AI
刷新
向量数据库之Lancedb学习记录

博主头像 简介 Lancedb是一个用于人工智能的开源矢量数据库,旨在存储、管理、查询和检索大规模多模式数据的嵌入。Lancedb的核心是用Rust编写的,并构建在Lance之上,专为高性能 ML 工作负载和快速随机访问而设计。 快速开始 安装 pip install lancedb 目前0.6.8需要pya ...

Pytorch DistributedDataParallel(DDP)教程二:快速入门实践篇

博主头像 一、简要回顾DDP 在上一篇文章中,简单介绍了Pytorch分布式训练的一些基础原理和基本概念。简要回顾如下: 1,DDP采用Ring-All-Reduce架构,其核心思想为:所有的GPU设备安排在一个逻辑环中,每个GPU应该有一个左邻和一个右邻,设备从它的左邻居接收数据,并将数据汇总后发送给右邻。 ...

机器学习基本概念简介

博主头像 说明:本人正在跟随台大李宏毅老师的课程学习,为了加强学习效果,特写成blog来记录,所有博客中的图片均截取自李宏毅老师的PPT。 一、机器学习是在干什么? 以中学时代所学的函数为例,做应用题时我们都会建立相应的正比例函数、二次函数等来解决,给定一个自变量x都能得到唯一的因变量y。现在我想找到一个函数 ...

Pytorch DistributedDataParallel(DDP)教程一:快速入门理论篇

博主头像 一、 写在前面 随着深度学习技术的不断发展,模型的训练成本也越来越高。训练一个高效的通用模型,需要大量的训练数据和算力。在很多非大模型相关的常规任务上,往往也需要使用多卡来进行并行训练。在多卡训练中,最为常用的就是分布式数据并行(DistributedDataParallel, DDP)。但是现有的 ...

读所罗门的密码笔记20_更好的自己

博主头像 1. 民营部门 1.1. 障碍最大的一步,与履行协议所需要的人才和技能有关 1.2. 多样性很好,不要过分依赖任何一种资源,因为政府会出于政治原因淡化问题,不尊重科学,甚至退出协议 1.2.1. 民营部门和非政府组织的强大联盟可能在这方面发挥至关重要的作用 1.2.2. 由于不少美国商界领袖支持《巴 ...

GPT连问工具随想

近来以为,使用GPT的一个方便之处就是,问题往往是自己主动问的(不论是临时受到的刺激还是长期依赖的困惑)。 在这种条件下,主动问的东西,得到了相当量(且在一些情况下还是有质的保证的)的回应的时候,难免就会在头脑中碰撞出更多的问题。 最近在学习一些东西(虽然初级但是面较广)的时候,就时常能感觉到,问题 ...

读所罗门的密码笔记19_治理模式

博主头像 1. 解决方案 1.1. 全球人工智能的环境错综复杂,它严重依赖于价值观,且关系重大 1.2. 即使是与大家同仇敌忾的问题做斗争,也往往无法在国际社会中取得最佳效果 1.3. OPCW(禁止化学武器组织)已经帮助限制了化学武器的开发和部署,但没有协议是百分百奏效的 1.4. 如果《核不扩散条约》有完 ...

向量数据库Chroma学习记录

博主头像 一 简介 Chroma是一款AI开源向量数据库,用于快速构建基于LLM的应用,支持Python和Javascript语言。具备轻量化、快速安装等特点,可与Langchain、LlamaIndex等知名LLM框架组合使用。 二 基本用法 1 安装 安装方式非常简单,只需要一行命令 pip instak ...

读所罗门的密码笔记18_大宪章

博主头像 1. 大宪章 1.1. 1215年会议开启了一个艰难的谈判过程,充满了紧张和对权力与道德权威的争夺 1.1.1. 这部宪章会赋予各方一系列的权力,对国王的自由裁量权进行制衡 1.2. 《大宪章》还需要300多年的时间和多次迭代,才能成为财产权、公平税收、司法程序和政府最高法律的参考文件 1.3. 当 ...

读所罗门的密码笔记17_网络安全

博主头像 1. 医疗保健 1.1. 人工智能在我们的身心健康护理中的使用可能会显得更有侵略性,这也是迄今为止人类医生仍然在大部分医疗相关体系中占据着核心地位的原因之一 1.2. 人工智能在医疗保健领域的力量在于,认知机器可以以比人脑更快、更准确的方式处理海量的数据流,并且识别复杂的模式 1.2.1. 图像识别 ...

解锁CodeGeeX智能问答中3项独有的隐藏技能

CodeGeeX是一款强大的AI编程助手,它能帮你快速解决编程中的各种问题。无论是代码调试、功能实现,还是学习新语言,CodeGeeX都能助你一臂之力。 在IDE中搜索“CodeGeeX”就可以免费下载使用 CodeGeeX在侧边栏提供的Ask CodeGeeX智能问答功能,很多用户每天会通过它,解 ...

读所罗门的密码笔记16_直通心智

博主头像 1. 直通心智 1.1. 如今,科学家已经可以诱发触觉、压觉、痛觉和大约250种其他感觉 1.1.1. DARPA支持的触觉技术第一次让一位受伤的人能够用假肢和手指感知到被触碰的物体 1.1.2. 可以建立人工系统,来替换和弥补受损大脑的部分区域 1.1.3. 神经科学家能够识别出大脑对各种想法的抽 ...

机器学习——常见模型评估指标

博主头像 目录一.模型评估综述1.1 什么是模型评估1.2 评估类型1.3 模型泛化能力1.4 过拟合与欠拟合1.4.1 过拟合1.4.2欠拟合二.常见的分类模型评估方式2.1 混淆矩阵2.2 准确率(Accuracy)2.3 精确率(Precision)2.4 召回率(Recall)2.5 F1-score ...

<1234···50>