AI文摘

blog-thum
【手撕LLM+RLHF】大模型PPO通关指南

朋友们好,果冻的朋友小冬瓜AIGC,在知乎和小红书上有很多大模型相关的原创超长文知识分享。其质量和内容都在众多知识分享自媒体中名列前矛,他原创课程已帮助多名同学上岸LLM赛道。其课程内容注重“手撕”,

read more
blog-thum
使用GRIT训练更好的LLMs,构建RAG20

ContextualAI是一家致力于开发健壮可靠的企业级AI性能的公司。RAG20是他们最新的成果,它通过端到端优化语言模型和检索器来克服传统RAG方法的局限性。RAG20模型

read more
blog-thum
RAG系列05:基于语义的Chunk分割

RAG中,在读取了文件之后,最主要的任务是把这些数据拆分成更小的chunk片段,随后将这些特征进行embedding以表达它们的语义。在RAG中,这一过程的位置如下图所示。最常见的分块方法

read more