Milvus 向量数据库由来已久，llm的来临再次带火了这个概念，本文是学习milvus的笔记，尽可能从工程开发者的角度说清楚milvus 架构 官网介绍了milvus建立在Faiss、HNSW、DiskANN、SCANN等向量搜索库之上，我们先弄清楚这些都是啥： Faiss： facebook(meta)开源的一个高效相似度搜索和稠密向量聚类的库，主要用于处理和搜索高维稠密向量。...

Transformer concept 当下如果要聊大模型，无法避开的即是Transformer的介绍。因此本节尽可能简单的介绍你需要知道的一切概念, 先看这张避不开的Transformer架构图，以下是一个翻译任务中的常见版本： token：简单理解成大模型输入/输出的最小单位 embedding： 可以理解成1中token的数学表达，可以理解成一个高维向量 enc...