🤖 AI/ML 技术名词速览表


1. 深度学习核心框架与高级 API

框架/库核心功能描述
PyTorch深度学习框架动态计算图,研究领域流行。
TensorFlow深度学习框架生产部署强大,Google 主导。
JAX数值计算/DL自动微分,JIT 编译,高性能研究。
Keras高级 API多后端支持 (TF, PyTorch, JAX),快速实验。
TF-Keras高级 APITensorFlow 生态内使用的 Keras 实现。
fastai高级 DL 库基于 PyTorch,提供高层次 API 和最佳实践。
PaddlePaddle深度学习平台百度开源,全流程支持,国内广泛应用。
MLX深度学习框架苹果公司开发,专为 Apple 芯片优化。

2. 预训练模型生态与 Transformer 库

框架/库核心功能描述
Transformers预训练模型库Hugging Face 主导,提供大量 SOTA 模型 (LLM, BERT 等)。
Diffusers扩散模型库Hugging Face 主导,用于图像生成 (如 Stable Diffusion)。
PEFT高效微调Parameter-Efficient Fine-Tuning,用于 LLM 等的高效微调 (如 LoRA)。
sentence-transformers句子嵌入生成高质量句子向量,用于语义搜索和聚类。
setfit文本分类基于 Sentence-Transformers 的高效 Few-Shot 文本分类。
timm计算机视觉Pytorch Image Models,大量 SOTA 图像分类模型。
OpenCLIP多模态模型用于实现和训练 CLIP 模型的 PyTorch 库。
Adapters模型微调插入小型、可训练模块进行高效微调的技术。

3. 模型部署、优化与格式

框架/库核心功能描述
Safetensors模型存储格式安全、高效地存储张量/模型权重的新格式。
GGUF模型存储格式用于在 CPU 上高效运行 LLM 的特定格式。
ONNX模型互操作性开放神经网络交换格式,用于模型跨框架部署。
OpenVINO部署与优化Intel 工具套件,用于模型优化和在 Intel 硬件上部署。
Core ML设备端部署苹果框架,用于在 iOS/macOS 设备上运行模型。
Transformers.jsWeb 推理在浏览器中运行 Hugging Face Transformer 模型。
LiteRT推理引擎轻量级深度学习推理引擎。
llamafile模型分发将 LLM 和推理引擎打包成一个可执行文件。

4. 特定任务、工具与传统 ML

框架/库核心功能描述
TensorBoard可视化工具用于跟踪实验指标、模型图和训练过程。
stable-baselines3强化学习 (RL)基于 PyTorch 的 SOTA RL 算法实现。
ml-agents强化学习 (RL)Unity 引擎的工具包,用于在游戏和模拟中训练智能体。
Scikit-learn传统机器学习Python 中最流行的分类、回归、聚类算法库。
Joblib并行计算/序列化用于加速 Python 函数和对象的序列化 (如缓存模型)。
Rust编程语言高性能、内存安全的编程语言,常用于底层 ML 工具。
sample-factory强化学习 (RL)高吞吐量和可扩展的 RL 训练库。

5. 自然语言处理 (NLP) 与语音处理

框架/库核心功能描述
spaCy工业级 NLP高效的 tokenization、NER、POS 等基础 NLP 功能。
Flair序列标注提供 SOTA 嵌入和序列标注模型 (NER, POS)。
BERTopic主题建模基于 BERT 嵌入,生成高质量的主题模型。
NeMo对话式 AINVIDIA 工具包,专注于语音识别、NLU 和 TTS。
fastText文本表示/分类高效的词向量和文本分类库。
Stanza多语言 NLP斯坦福大学的,提供多语言全套 NLP 功能。
speechbrain语音处理开源语音工具包,用于语音识别、增强等。
pyannote.audio语音分析说话人识别和 diarization (说话人分段)。
AllenNLPNLP 研究框架基于 PyTorch,方便研究人员构建和分享 NLP 模型。
ESPnet语音识别/合成端到端的语音处理工具包。
Fairseq序列到序列专注于神经机器翻译等序列任务的工具包。
paddlenlpNLP 工具包百度飞桨生态下的 NLP 库。

6. 垂直领域与硬件加速

框架/库核心功能描述
PaddleOCR光学字符识别 (OCR)百度飞桨生态下的超轻量级 OCR 工具包。
Asteroid语音分离/增强用于语音信号处理的 PyTorch 工具包。
HabanaAI 硬件英特尔旗下,提供 AI 训练和推理加速器。
GraphcoreAI 硬件提供智能处理器 (IPU),用于加速机器学习。
unity-sentis游戏内推理Unity 引擎内置的 AI 推理引擎。
DDUF(待定)可能是特定研究领域的框架,如深度扩散模型相关。
univa(待定)可能是企业级 AI 或计算相关的解决方案。
Logo

中国智能体开发者社区,聚焦智能体与大模型开发,提供前沿资讯、实用工具链、开源项目及行业案例。通过技术沙龙、开发者大赛等活动,促进经验交流与协作,助力开发者快速构建创新智能应用。

更多推荐