韩国电信运营商 LG U+ 明年进军 AI Token 业务,帮助企业降低 AI 转型成本
IT之家 11 月 15 日消息,据韩媒 Etnews 今天报道,韩国电信运营商 LG U+ 将于明年进军 AI Token 业务,利用自主研发的 Token 优化技术,帮助企业降低 AI 转型(AX)成本。 据介绍,这项服务拥有用于设计 Agent 任务执行路径的“Harness Engineering”、根据问题类型分配模型的“智能路由”,以及为优化推理过程而采用异构半导体的“芯片组合”三项技术。 IT之家从原报道获悉,LG U+ 将减少 AI Agent 执行任务时不必要的重复搜索和验证,并根据任务难度匹配最合适的模型。同时结合模型轻量化和推理技术,该公司的自研端侧 AI 模型在体积缩小三分之一的情况下,性能仍达到通用云端模型的 95% 以上。通过让小模型快速生成答案、再由大模型进行验证的技术,Token 生成速度提升两倍以上。 基础设施方面,LG U+ 采用芯片组合策略,将英伟达、AMD GPU 与韩国本土企业 Furi...
来自IT之家 AI的《韩国电信运营商 LG U+ 明年进军 AI Token 业务,帮助企业降低 AI 转型成本》。重点看智能体工作流、模型能力与工程。摘要提到:IT之家 11 月 15 日消息,据韩媒 Etnews 今天报道,韩国电信运营商 LG U+ 将于明年进军 AI Token 业务,利用自主研发的 Token 优化技术,帮助企业降低 AI 转型(AX)成本。 据介绍,这项服务拥有用于设计 Agent 任务执行路径的“Harness Engineering”、根据问题类型分配模型的“智能路由”,以及为优化推理过程而采用异构半导体的“芯片组合”三项技术。 IT之家从原报道获悉,LG U+ 将减少 AI Agent 执行任务时不必要的重复搜索和验证,并根据任务难度匹配最合适的模型。同时结合模型轻量化和推理技术,该公司的自研端侧 AI 模型在体积缩小三分之一的情况下,性能仍达到通用云端模型的 95% 以上。通过让小模型快速生成答案、再由大模型进行验证的技术,Token 生成速度提升两倍以上。 基础设施方面,LG U+ 采用芯片组合策略,将英伟达、AMD GPU 与韩国本土企业 Furi...
本站只提供摘要与原文入口。完整内容请阅读原文。
来源:IT之家 AI · ithome.com