挖掘有趣 Github 的猫。


有事联系:https://t.me/qumaobot
🍭 #PDF处理 #数据清洗 #大模型训练


🏵 Olmocr - PDF文档转换为LLM训练数据


🍥 简介:
Olmocr 是一套专门用于 PDF 文档线性化处理的工具集。该程序能够从复杂的 PDF 结构中提取并转换文本及布局信息,将其转化为适合大语言模型(LLM)训练的高质量数据集格式,从而优化模型对文档类数据的理解与分析能力。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #人工智能 #大模型训练 #个人助手


🏵 WeClone - 基于聊天记录的AI数字分身克隆工具

🍥 简介:
WeClone 是一款集成化解决方案,支持用户导入个人历史聊天记录,对大语言模型进行针对性微调与训练。该工具旨在通过学习用户的语言习惯、交互逻辑与思维方式,精准复刻个人表达风格。训练完成后,用户可将模型部署至聊天机器人平台,实现智能化、个性化的数字分身交互体验。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #人工智能 #大模型工具 #开发资源


🏵 LLMs-local - 本地运行大语言模型资源聚合


🍥 简介:
该项目整理了适用于本地部署大语言模型(LLM)的各类平台、开发工具及相关技术资源。内容涵盖了模型推理引擎、图形化管理界面以及部署环境配置方案,旨在帮助开发者在个人终端或本地服务器环境中高效运行、测试和集成大规模预训练模型,是进行本地化人工智能开发的重要参考库。


🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #AI工具 #开发框架 #大语言模型


🏵 RLMs - 大语言模型任务分解与循环调用框架

🍥 简介:
RLMs框架旨在优化大语言模型对复杂长文本任务的处理能力。通过将大规模任务递归拆解为小型单元并支持循环调用,该系统能显著提升处理效率。核心特性包含本地及隔离环境下的代码执行支持,兼容主流模型服务商,并集成完善的模型训练与运行日志记录功能,适用于构建高度可扩展的自动化智能应用。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #大模型 #强化学习


🏵 Slime - 大模型强化学习框架

🍥 简介:
Slime 是一个专注于大型语言模型(LLMs)后训练的框架,旨在有效整合强化学习(RL)范式。该框架提供了一套工具和方法,使得LLMs能够在RL环境中进行扩展和优化,以处理更复杂的任务并提升决策能力。通过Slime,研究人员和开发者可以更便捷地探索LLMs在各种交互式场景中的应用潜力,推动LLMs与RL技术的深度融合,从而实现更智能、更自主的AI系统。

🎈 【进入项目】


🗣 活动线报 | 掘金项目
🍭 #大语言模型 #深度学习


🏵 Byte Latent Transformer - 字节级LLM架构

🍥 简介:
Byte Latent Transformer(BLT)是一种创新的字节级大模型架构,无需分词即可端到端处理原始字节流,极大提升了推理效率和健壮性。它通过动态分割字节为可变长度的“Patch”片段,实现按需分配算力,适应不同数据复杂度。BLT引入了新的注意力机制,增强了字节与Patch间的信息流动,并包含专用的字节序列记忆。官方代码支持大规模模型训练和推理,可直接加载权重并生成文本,适合探索高效、灵活的LLM新范式和大规模预训练研究。

🎈 【进入项目】


🗣 羊毛撸货线报 | 合作/投稿
🗣 每日羊毛线报 👈


🏵 Skywork-OR1 - 增强数学与代码推理

🍥 简介:
Skywork-OR1 (Open Reasoner 1) 是一个专注于提升大型语言模型在数学和代码领域推理能力的项目。其核心技术是采用基于规则的大规模强化学习(RL),并结合精心设计的数据集与训练流程。该项目发布了一系列模型,包括专精数学的 Skywork-OR1-Math-7B,以及通用推理预览版 Skywork-OR1-7B/32B-Preview。这些模型在数学(如 AIME 基准测试)和代码(如 LiveCodeBench)推理任务上展现出领先性能,部分模型甚至能媲美参数量远超自身的模型。项目已开源模型权重、RL 训练数据及相关代码。

🍭 #大语言模型 #强化学习


🎈 【进入项目】


🎯 关注频道 🤖 合作/投稿
 
 
Back to Top