Label Studio 数据标注平台，大模型预训练与微调必备

原创 于 2025-11-24 10:29:44 发布 · 254 阅读 · 0 GEO检测

第 1 章 简介

Label Studio 是一个开源的数据标注工具，支持文本、图像、音频、视频等多种数据类型的标注。它提供了灵活的标注界面配置和强大的插件机制，适合用于构建高质量的训练数据集。通过 Label Studio，用户不仅可以进行手动标注，还能集成机器学习模型，实现半自动或自动标注，加快数据准备过程。

🌐 相关网址

  • 官网
    https://labelstud.io/
  • GitHub
    https://github.com/HumanSignal/label-studio/

图片

第 2 章 安装

执行如下命令，创建Conda环境

conda create -n label-studio python=3.12conda activate label-studio
标签
#数据标注平台 #Label Studio #大模型预训练 #微调
了解本专栏 订阅专栏 解锁全文 超级会员免费看
博客
LangGraph 与 CrewAI：Agent 编排、协作与选型深度解析
08-21 401
文章摘要 本文深入解析了LangGraph和CrewAI两个Agent编排框架的核心概念与技术特点。 LangGraph采用有向图状态机模型，通过State、Node、Edge三大抽象实现精确的流程控制，其特色功能包括： 使用Reducer函数解决并行输出合并问题 Checkpoint机制实现流程持久化和断点续跑 Interrupt机制支持人工干预和动态暂停 CrewAI则采用角色扮演团队协作模式，主要基于Agent、Task、Crew、Process四个核心概念构建多Agent系统，强调角色分工和自主协作
博客
手把手教你用WorkBuddy做没有AI味的PPT
08-21 102
摘要：本文通过WorkBuddy制作季度复盘PPT的案例，分享如何深度利用AI工具提升PPT制作效率和质量。核心观点指出：优秀的PPT不是生成而是"想"出来的，需与AI协同完成三个关键环节——1.明确PPT类型（阅读/演讲/汇报型）和受众需求；2.六步工作法：素材盘点→问题聚焦→大纲构建→专家协同→规范执行→迭代优化；3.将成功经验沉淀为可复用的Skill模板。文章强调AI擅长信息整合与视觉呈现，但受众分析、内容取舍和现场呈现仍需人工判断，二者结合才能避免"AI味"的
博客
Kubernetes 1.34 DRA GA 实战：用 ResourceClaim 声明式切分 GPU，MIG / MPS / 时间切片一文讲透
08-20 307
Kubernetes 中 GPU 资源高效管理：DRA 与切分技术实战 摘要：本文探讨 Kubernetes 1.34 引入的 Dynamic Resource Allocation (DRA) 机制如何解决传统 device plugin 在 GPU 资源管理上的局限性。DRA 通过 ResourceSlice、DeviceClass、ResourceClaim 等核心 API 实现声明式资源分配，支持精细化的 GPU 切分策略。文章对比了 NVIDIA 的 MIG（硬件隔离）、Time-Slicing（
博客
从新版 MCP 到 Gateway API 推理扩展：读懂 Higress v2.2.4 的关键变化
08-20 285
Higress 网关迎来多项关键更新：1. 首个支持 MCP 2026-07-28 无状态 HTTP Tools 协议的开源实现，采用请求级上下文替代会话机制，提升横向扩展能力；2. 全面支持 Kubernetes Gateway API v1.6 和推理扩展 v1.4，通过官方一致性测试；3. 新增 AI 负载均衡算法和插件版本管理，优化观测限流功能；4. 社区启动 CNCF 孵化申请，建立公开治理流程。版本 v2.2.4 包含 65 项生产优化，显著提升网关性能和协议兼容性。
博客
迈向生产级 AgenticOps：STAROps 如何构建可泛化的根因定位能力
08-19 410
阿里云STAROps平台聚焦AI原生运维的核心挑战：根因分析（RCA）的准确性。不同于传统以工具数量衡量的AgenticOps，STAROps通过统一对象模型（UModel）构建系统拓扑，结合动态调查图谱和RCA-Bench评估体系，实现跨域故障的精准定位。评测显示，其在数据库、节点等复杂场景中的根因识别准确率显著优于通用方案（综合分75.2 vs 51.0）。典型案例表明，STAROps能穿透表象链路（如前端告警实为底层节点故障），避免因错误判断导致误处置。该平台通过持续迭代机制，将生产环境反馈转化为能力
博客
试点易、投产难、合规险，同花顺 AI‑Infra 给出券商大模型落地解法（THS）
08-19 765
券商行业AI应用已进入比拼基础设施的阶段。尽管大模型技术日趋成熟，但金融机构面临四大核心挑战：信创环境算力支持、多模型统一运营、合规风控及业务系统调用效率。同花顺AI-Infra通过四大产品矩阵（AI-PaaS信创云平台、LLM-OPS模型管理、LLM-WAF安全围栏、AI-Gateway网关）构建完整解决方案，将私有云建设周期从1-2年缩短至1-2个月，并提供金融级合规保障。该体系已支持智能投顾、多业务协同等场景，帮助券商实现从“AI能用”到“AI好用”的跨越，其30年金融行业经验确保方案深度适配
博客
相比层出不穷的 Agent 框架，不变的 Agent Protocol 是什么
08-18 390
本文探讨了当前各类Agent框架的核心协议对象与Runtime能力。文章指出，尽管框架名词各异，但生产级Agent系统需要解决的底层问题始终围绕任务生命周期管理展开。作者提出以Thread/Run/Step/Event/Artifact/Checkpoint这六个核心协议对象为主线，将Agent Runtime拆解为可协议化的稳定边界。 文章详细分析了执行模型、状态管理、中断恢复、工具协议等八个关键维度，指出工具层协议最可能先标准化，而Runtime Loop承载方式和多Agent协作模型将长期分层演进。作
博客
DeepSeek Harness 全景可观测实践
08-18 289
为DeepSeek Harness（DSH）AI编码Agent提供全景可观测性的两种开源方案。DSH自身虽有完整日志记录，但需要Trace和Metrics来全面分析性能、调用关系和成本问题。阿里云可观测团队基于LoongSuite提供了两种方案：1）独立插件@loongsuite/dsh-plugin，可直接安装并发送OTLP数据到各类后端；2）LoongSuite Pilot内置的DSH集成，适用于多Agent统一观测场景。两种方案均遵循OpenTelemetry GenAI标准，但数据采集方式
博客
NVIDIA KAI Scheduler深度解析——Kubernetes原生AI调度器的架构、原理与实践
08-18 290
NVIDIA KAI Scheduler是专为AI工作负载设计的Kubernetes原生调度器，解决了传统调度器在GPU资源管理上的不足。它基于kube-batch架构，支持Gang调度、GPU分片共享、拓扑感知调度等关键特性。KAI Scheduler通过层级队列实现多租户公平调度，并与HAMi-core集成实现GPU显存硬隔离。相比kube-scheduler和Volcano，它在AI场景下提供了更高效的资源利用率和调度能力，特别适合大规模分布式训练、推理训练混合部署等场景。
博客
智能体身份管控落地指南
08-17 358
2026年，智能体身份成为云厂商核心产品能力，Google、微软、AWS、阿里云等纷纷推出解决方案，旨在解决智能体操作的企业系统权限归属问题。文章分析了智能体身份的四层管理对象（人的身份、智能体身份、运行实例身份和委托关系），梳理了行业三大技术路线（独立身份平台、运行时认证和跨应用授权），并提出了人机协同的授权链设计。企业落地需分三步走：建立智能体清单、改造凭证体系、完善运行时治理，最终实现可审计的双重身份验证和动态权限控制。文章强调，关键在于构建不丢失上下文的执行链，确保每个操作都能追溯责任主体和授权来源
博客
Graph Engineering工程化
08-17 85
本文探讨了多智能体系统（Graph Engineering）在复杂任务中的组织与实施。文章首先分析了基础协作模式（如顺序、动态分流、并行等），指出实际开发中复杂Graph往往是这些原子模式的组合。随后提出Graph Engineering需解决的关键问题：状态管理、不确定性与边界控制、容错恢复及可观测性。进一步对比主流开发框架（LangGraph、Google ADK等）的不同编排行方式，并讨论AI动态生成Graph的新趋势。最后强调不应盲目使用Graph，需根据任务复杂度权衡成本收益，选择最合适的方案——
博客
Agent 的评测工程化
08-17 326
本文系统阐述了Agent系统在业务场景中的评测方法论。区别于传统AI评测，业务Agent的评估需要超越文本生成质量，关注三大核心维度：一是全链路可追溯性，需记录从意图识别到工具调用的完整轨迹；二是业务合规性，包括政策遵守、权限控制和风险动作管理；三是系统可靠性，要求环境隔离、版本控制和回归测试。文章提出五层评测框架（任务集-运行器-环境-评分器-报告），强调必须建立硬性门禁指标（如审批触发、数据权限）与软性评分指标的分离机制。通过借鉴公开基准的设计思想，企业应构建
博客
Google Agent Skills 的构建、测试与规模化全景解析
08-14 197
Google 发布的 Agent Skills 体系为核心案例，指出 Agent 从“Prompt 工程”走向“产品工程”的范式转变：把领域知识封装为可执行、可评估、可维护的技能资产，而不是靠不断加长的对话提示；其关键工程抓手体现在统一的技能仓库结构（如以 SKILL.md 定义合约、OWNERS 绑定责任、EVAL.yaml 规定验收）以及三层质量防线（CI/CD 检查、持续评估、所有权模型）。
博客
TextIn xParse + WorkBuddy实战，零门槛轻松打造财报解析助手
08-14 495
本文通过实际操作展示了AI工具处理复杂财报文档的优化路径。作者以美的集团276页年报为测试样本，对比了直接解析PDF与启用TextInxParse结构化解析的差异。实验显示，TextInxParse能将多级表头、合并单元格、跨页表格等复杂结构转换为保留原始关系的Markdown/JSON格式，使处理时间从22分钟缩短至3分钟，且解析准确率显著提升。 在扩展到海尔、格力三家公司横向对比时，系统成功处理了图文混排、跨页表格等难点
博客
模型这么多，请求该交给谁？阿里云 AI 网关智能路由，正式上线！
08-13 402
阿里云AI网关推出智能路由功能，解决多模型场景下的选择难题。该功能通过任务适配、成本、速度等维度自动筛选最优模型，并确保多轮对话和Agent工具链的上下文连贯性。其核心流程包括任务识别、能力筛选、优化目标匹配，最终生成唯一路由决策。系统支持四种优化策略（均衡、成本、速度、质量），并针对独立请求、多轮对话、Agent工具链设计差异化路由节奏。该方案显著降低模型管理复杂度，用户仅需通过简单API调用即可启用，无需维护复杂配置逻辑。
博客
RAG技术栈深度解析：从向量数据库到检索增强生成的工程化落地
08-13 472
RAG技术栈解析与企业级落地指南 摘要：本文深入剖析检索增强生成(RAG)技术栈，探讨其作为大模型落地关键技术的核心价值。RAG通过结合外部知识库检索与生成模型，有效解决大模型的知识时效性、领域专业性和事实幻觉三大固有缺陷。文章系统梳理了RAG技术架构的两大阶段：离线索引流程(数据加载→清洗→切分→向量化→存储)和在线服务流程(查询改写→检索→重排序→生成)，并提供了向量数据库选型对比与Embedding模型优化建议。针对不同规模企业，给出从原型验证到生产部署的完整方案，强调RAG与微调、Prompt En
博客
基于 eBPF + Cilium 的 Kubernetes 网络可观测与安全治理实践
08-12 804
本文介绍了基于 eBPF 和 Cilium 的 Kubernetes 网络可观测性与安全治理实践。主要内容包括： eBPF 技术原理：作为内核级可编程框架，eBPF 通过验证-编译-挂载机制实现安全高效的内核扩展，利用 eBPF Map 实现内核与用户态数据交互。 Cilium 架构：基于 eBPF 替代传统 iptables/ipvs，实现高性能 Service 负载均衡和基于身份的网络策略控制。 Hubble 可观测性：三级架构设计实现低开销的网络流量监控，支持 L3-L7 层协议解析和可视化展示。 T
博客
大模型系统核心网关架构解析——从接入、鉴权、路由、推理、安全到流量治理的完整视图
08-12 454
随着大模型应用复杂度提升，单一网关已无法满足生产需求，需构建多层协同的网关体系。本文系统剖析六大核心网关：1）接入网关统一协议与安全策略，处理流式响应；2）鉴权网关实现多租户隔离与RBAC控制；3）模型路由网关智能调度多模型，平衡成本与性能；4）推理调度网关优化GPU资源分配，提升TTFT/TPOT指标；5）内容安全网关通过双引擎防御注入攻击与合规风险；6）流量治理网关实施精细化限流与成本控制。各网关纵向串联形成处理流水线，横向以安全与治理为主线贯穿全链路。
博客
KubeRay + vLLM：Kubernetes 上的大模型推理服务生产级部署与三级弹性伸缩实战
08-11 495
在大模型落地过程中，推理服务的稳定性、吞吐量和资源利用率是决定用户体验的核心指标。本文以生产环境实践为基础，详细拆解如何基于 KubeRay 与 vLLM 在 Kubernetes 集群上构建高可用的大模型推理平台，涵盖 GPU 精细化调度、三级弹性伸缩机制、PagedAttention 内存优化及全链路监控方案，力求为 AI Infra 工程师提供一套可直接落地的技术实现路径。
博客
HxApisix 云原生 API 网关的架构设计与 AI 集成实践（THS）
08-11 505
文章摘要 HxApisix是同花顺基于Apache APISIX开发的云原生API网关，专为应对微服务架构和AI Agent接入的挑战而设计。其核心架构采用OpenResty+Etcd+Kubernetes的技术栈，实现了高性能和热更新能力。网关最大的创新是MCP代理插件，能将REST API转换为AI Agent可调用的MCP协议接口，支持三种工作模式和双层认证架构。同时，HxApisix构建了金融级安全防护体系，包括多认证插件矩阵和智能反爬防火墙。该方案有效解决了协议转换、安全防护和流量治理等关键问题，
博客
Apache Iceberg + Spark Streaming 构建 Lakehouse 实时数仓
08-11 580
摘要： Apache Iceberg结合Spark Streaming构建Lakehouse实时数仓，解决传统Lambda架构的数据一致性与维护成本问题。通过Iceberg的三层元数据模型（Catalog→Snapshot→DataFile）实现隐式分区、Time-Travel和并发写入安全。利用Flink CDC 3.0整库同步能力，配置YAML实现Schema自动演进，优化Checkpoint策略平衡延迟与小文件问题。针对CDC场景采用Merge-on-Read模式，结合Spark Structured
博客
Kubernetes + Ray + Volcano：云原生AI训练调度体系
08-10 506
云原生AI训练调度实践：Kubernetes+Ray+Volcano解决方案 摘要 本文介绍了Kubernetes、Ray和Volcano相结合构建云原生AI训练调度体系的工程实践。针对大模型训练中Kubernetes调度器的三大短板（缺乏Gang调度、拓扑感知不足、吞吐量低），提出Volcano+KubeRay的解决方案： 核心技术： Volcano提供Gang调度、网络拓扑感知和批量调度能力 KubeRay实现Ray集群在K8s上的自动化部署管理 关键特性： 确保分布式训练任务"全有或全无"的Gang调
博客
从MoE到Agentic AI的架构演进与框架选型指南
08-10 553
2026年大模型技术发展呈现多路线并进态势：架构层面，MoE成为400B+模型标配，Token Dropless机制和精细化专家路由显著提升性能；Mamba-2通过SSD理论优化硬件利用率，与Attention混合的Jamba架构成为长序列处理新标准；MLA技术大幅压缩KV Cache。多模态领域，闭源模型在视频理解、OCR等方向差异化竞争，开源模型如Qwen3.5 Omni性能已达前沿水平，LLaVA生态持续繁荣。训练框架方面，Megatron、DeepSpeed、Colossal-AI等针对不同场景优化
博客
Graph Engineering：新瓶装旧酒，还是 Agent 变强后的必然？
08-10 197
文章摘要：GraphEngineering是近期AI工程界热议的概念，本质上是利用图结构（节点、边、状态）来组织多Agent协同工作。与早期的LangGraph相比，当前GraphEngineering的变革在于：组织对象从单一Agent的内部步骤转变为自主性更强的多Agent系统。其核心价值体现在处理复杂任务时实现职责分工（如研究/写作/审核角色分离）、并行处理、权限隔离和流程控制。虽然与LoopEngineering都涉及循环机制，但前者关注多Agent协作关系，后者专注单个Agent的持续行动。实际应
博客
从 PagedAttention 到 Prefill-Decode 分离的深度解析
08-08 566
大模型推理架构正经历从PagedAttention到Prefill-Decode分离的演进。PagedAttention通过虚拟内存分页机制优化KV Cache管理，提升显存利用率；连续批处理动态调整请求，提高GPU使用率。而Prefill-Decode分离架构（如DistServe、Splitwise、Mooncake）进一步解耦计算密集的Prefill阶段与内存受限的Decode阶段，实现资源优化分配。生产实践中，vLLM的Wide-EP策略和DeepSeek的部署案例展示了这些技术的实际效果，推动推理
博客
基于阿里云 AgentLoop 的 Skill 评估与优化最佳实践
08-08 438
摘要： 本文介绍了基于阿里云AgentLoop平台的Skill评估与优化全流程实践，涵盖Skill创建、可观测接入、离线评估、BadCase分析和迭代优化的闭环体系。通过数据驱动方法，开发者可系统性地提升AIAgent技能质量： 创建与观测 Skill包含Prompt指令、工具调用规范、输出约束等要素，通过AgentLoop资产管理模块创建。 上线前接入可观测能力，实时监控调用量、成功率、工具调用链等指标，建立优化基线。 评估与优化 构建覆盖核心场景的评估数据集，运行多模型/框架的离线实验，从安全性、正确性
博客
AI 应用的流量入口：AI 网关 Serverless
08-07 155
【摘要】AI应用开发者面临三大困境：模型成本不透明、主模型限流导致业务中断、多Agent入口混乱。百度智能云推出的AI网关Serverless新版通过统一流量入口，提供零成本起步标准版和进阶企业版，支持模型自动降级（AIFallback）和集中式Agent管理。即将上线的智能路由功能可自动选择最优模型，兼顾成本与性能，实现多模型统一调度。该方案无需改造现有应用，有效降低AI应用的运维复杂度与管理成本。
博客
LLM Wiki 的工程实践，从 AI Coding、Obsidian 到 RAG 协同
08-07 490
本文探讨了LLMWiki+OKF在企业知识管理中的创新应用与实践路径。文章首先提出构建面向AICoding的知识地图方案，通过组织业务、架构、工程等领域的结构化知识，实现渐进式上下文加载，并强调知识维护的复利效应。第二部分详述了在Obsidian中构建LLMWiki的两种方法：利用社区插件快速搭建，或通过自定义Agent实现更灵活的OKF兼容方案。最后深入对比了LLMWiki与RAG技术的差异与互补性，指出前者侧重知识治理与关系维护，后者擅长高效检索，二者结合可形成完整的企业知识解决方案。文章强调应根据实际
博客
【伯克利博士论文】用多智能体系统进行任务分解
08-06 180
这篇 Berkeley 博士论文把视觉生成、局部视觉理解和语言模型并行推理放在同一条主线上：复杂 AI 任务的关键，不只是更大的模型，而是更好的任务分解。语言模型可以规划，视觉模型可以执行和感知，外部模块可以验证，推理线程可以并行搜索；当这些角色被组织成协同系统时，模型就更有机会解决单体生成难以稳定完成的任务。从 LMD 到 LVD、SLD、DAM，再到 APR 和 ThreadWeaver，论文展示了一条清晰路线：把隐式意图变成显式结构，把一次性生成变成可检查流程，把串行推理变成可并行计算。
博客
基于Loop Engineering的自动化因子发现引擎
08-06 520
摘要：本文介绍了一种基于Loop Engineering框架的自动化因子挖掘系统，通过"生成-审查-验证"闭环流程实现高效因子发现。系统采用五维演化策略（变异、交叉、参数扰动、随机探索和LLM引导）生成候选因子，结合11项联合过滤和频繁子树规避机制（FSA）确保因子质量与多样性。经过581轮迭代测试16,939个候选因子，最终保留69个独立因子，平均夏普比率1.60，年化超额收益11.7%。Top5复合因子年化超额达18.3%，超额夏普3.14。系统通过检查点机制实现断点续跑，Skill
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值