华人澳洲中文论坛

热图推荐

    进军类ChatGPT,成立名目组?腾讯回应

    [复制链接]

    2023-2-28 15:39:07 26 0



    中国基金报记者 郭玟君
    据36氪职场Bonus报导,腾讯针对类ChatGPT对话式产品已成立“混元助手(HunyuanAide)”名目组,该名目组Owner为张正友,PM分别为俞栋、王迪、刘田,目前该名目有最少7位组长、7位Sponsor。《中国基金报》获取腾讯方面民间回应:在相干方面早有规划。
    对话式产品早有规划
    专项钻研有序推动
    腾讯方面表现,目前,腾讯在相干标的目的上已有规划,专项钻研也在有序推动。腾讯继续投入AI等前沿技术的研发,基于此前在AI大模型、机器学习算法以及NLP等畛域的技术贮备,将进一步发展前沿钻研及运用探究。
    报导称,该名目组将联结腾讯外部多方团队,构建大参数言语模型,指标是经过机能不乱的强化学习算法训练,完美腾讯智能助手工具,打造“腾讯智能大助手”,并成为国际的业界标杆。该名目组旨在经过机能不乱的强化学习算法训练,完美腾讯智能助手工具。
    据报导,混元助手名目组的一号位张正友是腾讯史上最高职级具有者,早年曾在微软钻研院就职,率领视觉团队从事少量学术钻研,奉献颇丰。张正友于2018年参加腾讯,创立了腾讯机器人试验室RoboticsX,努力推动人机合作的下一代机器人钻研。2021年1月8日,腾讯宣告张正友成为腾讯首位17级钻研员/出色迷信家。
    “混元AI大模型”4月初次公布
    据理解,混元AI大模型(下文简称“HunYuan”)是腾讯早前就曾经在研发的人工智能技术。
    2022年4月,腾讯初次对外披露HunYuan研发停顿。HunYuan集CV(计算机视觉)、NLP(天然言语了解)、多模态了解才能于一体,前后在MSR-VTT,MSVD等五大权威数据集榜单中登顶,完成跨模态畛域的大满贯。2022年5月,更是CLUE(中文言语了解评测聚拢)三个榜单同时登顶,一举打破三项纪录。
    跟着AI技术不停开展,AI大模型(又称预训练模型)逐步成为产业中最炽热的技术名词。
    预训练模型是指事后训练好,拥有相对于通用性的“一套算法”,拥有“巨量数据、巨量算力、巨量模型”等特性。大模型经过学习样本数据的外在法则和表白档次,进化出接近、超出人类的智能水平,具备剖析推理才能,可以辨认文字、图象和声响。
    2022年十二月,HunYuan又迎来全新停顿,推出国际首个低本钱、可落地的NLP万亿大模型,并再次登顶天然言语了解工作榜单CLUE。
    “混元AI大模型”
    已在腾讯多个中心业务场景落地
    预训练的提出使得人工智能进入全新的时期,诱发了学术界和工业界的钻研热潮。
    跟着算力的开展,模型容量继续晋升,模型通用性和泛化才能也更强,钻研大模型成了近两年的趋向。国际里头部科技公司均有规划,公布了若干千亿范围以上的大模型。
    但是,面对参数量进一步扩张,业界并无在高速网络、训练/推理框架、模型算法和落地运用等方面有片面深化的地下性钻研。
    基于腾讯弱小的底层算力和低本钱高速网络根底设施,HunYuan依靠腾讯当先的太极机器学习平台,推出了HunYuan-NLP1T大模型并登顶国际最权威的天然言语了解工作榜单CLUE。
    该模型作为业界首个可在工业界海量业务场景间接落地运用的万亿NLP大模型,前后在热启动和课程学习、MoE路由算法、模型构造、训练减速等方面钻研优化,大幅升高了万亿大模型的训练本钱。
    用千亿模型热启动,最快仅用256卡在一天内便可实现万亿参数大模型HunYuan-NLP 1T的训练,总体训练本钱仅为间接冷启动训练万亿模型的1/8。
    另外,业界基于万亿大模型的运用探究极少,对此腾讯研发了业界首个反对万亿级MoE预训练模型运用的散布式推理和模型紧缩套件“太极-HCF ToolKit”,完成了无需事前从大模型蒸馏为中小模型进而推理,便可使用低本钱的散布式推理组件/办事间接进行原始大模型推理部署,充沛发扬了超大预训练模型带来的模型了解和生成才能的跃升。
    目前HunYuan-NLP 1T大模型已在腾讯多个中心业务场景落地,并带来了明显的成果晋升。
    HunYuan协同了腾讯预训练研发气力,旨在打造业界当先的AI预训练大模型和解决计划,以一致的平台,完成技术复用和业务降本,反对更多的场景和运用。以后HunYuan残缺掩盖NLP大模型、CV大模型、多模态大模型、文生图大模型及泛滥行业/畛域工作模型。
    HunYuan前后反对了包罗微信、QQ、游戏、腾讯广告、腾讯云等泛滥产品和业务,经过NLP、CV、跨模态等AI大模型,不只为业务发明了增量价值并且升高了使用本钱。特别是其在广告内容了解、行业特点挖掘、案牍创意生成等方面的运用,在为腾讯广告带来大幅GMV晋升的同时,也初步验证了大模型的商业化后劲。
    下列是HunYuan在对话生成和小说续写等场景下的案例。
    对话生成:



    小说生成:



    广告案牍生成:



    广告案牍衍生:



    论文生成:



    编纂:舰长
    审核:木鱼
    版权声明
    《中国基金报》对本平台所刊载的原创内容享有著述权,未经受权阻止转载,不然将查究法律责任。
    受权转载协作分割人:于学生(电话:0755-82468670)

    发表回复

    您需要登录后才可以回帖 登录 | 立即注册

    返回列表 本版积分规则

    :
    注册会员
    :
    论坛短信
    :
    未填写
    :
    未填写
    :
    未填写

    主题31

    帖子39

    积分187

    图文推荐