他认为,大规模预训练模型是AI大数据要走的必然之路 。从学术界和产业界的角度来看,AI和大数据技术的变化也会非常大 。未来两年、最多三年,AI将会有很大能力的提升 。
回溯历史 , 从最早Deep Learning到Alpha go,到Zero 自训练,到Transformer,再到GPT-3, AI在突飞猛进的发展,并不断落地在应用场景中,比如 AI制药、预测化学分子都极大地提高了所在行业的生产力 。
启明创投合伙人周志峰也表示 , 人工智能过去10年发展集中在感知智能,特别是视觉和语音技术的突破 。下一个十年,人工智能将走向认知智能,预训练大模型是其核心技术推动力和关键基础设施,让AI吸收更多的知识去理解和思考 , 最终实现接近人类水平的认知 。同时,预训练大模型使得AI从依赖手工调参建模走向可大规模复制的工业化阶段 。
大规模预训练模型被投资人看好,也直接反映在了投融资的热度上 。
睿兽分析显示 , 2022年以来,尤其是下半年,大规模预训练模型领域出现了多笔大额融资 。
2月10日 , 澜舟科技完成近亿元Pre-A轮融资 , 由联想创投、斯道资本共同领投,创新工场跟投 。9月26日,智谱AI宣布获得数亿元B轮融资,由君联资本和启明创投联合领投 。11月7日,小冰公司宣布完成10亿元新融资 。12月6日,聆心智能完成数千万元天使+轮融资,由连星资本领投,图灵创投和智谱AI跟投 。
这些企业均将商业落地作为融资后的发力重点 , 但其落地的侧重点各有不同 。
澜舟科技研发的“孟子”模型 , 用更小的模型规模(10亿参数量)实现了比肩超大模型的性能,能够具备灵活的领域和场景适应能力,在机器翻译、文本生成、行业搜索等场景更利于快速、低成本地落地 。
2021年9月,澜舟科技和传神合作的第一个基于孟子预训练模型的“任度”翻译引擎正式发布上线,截至目前澜舟科技已完成了各行业垂直领域20余个翻译模型的开发,覆盖新闻、金融、汽车等领域 。
聆心智能目前则主要侧重于游戏、营销、情感三个领域 。
聆心智能在12月推出了图灵世界的首个产品“AI乌托邦”,用户可快速定制 AI 角色,只需要输入简单的角色描述,就可以召唤出相应人设的 AI,与之进行深度对话 , 还可以命令AI完成相应的任务 。
此外,聆心智能还打造了Emohaa情绪疗愈机器人,并与精神心理平台好心情达成合作,落地了国内首款人工智能心理陪伴数字人;还与高端豪华电动车品牌Beyonca合作,打造了新一代智能驾舱助手 。
新一轮融资公布当天,小冰公司启动了对旗下人工智能数字员工(AI Being Employee)产品线的年度升级,其中之一就是加强大模型对话引擎 。
文章插图
AI小冰
据悉 , 目前小冰框架中运行了30万名数字员工 , 包括万科集团年度优秀员工“崔筱盼”、红杉中国首位虚拟分析师“Hóng”、虚拟歌手“洛天依”等 。由小冰框架生成的“小堂妹”等数名虚拟主播 , 全网播放量均已破亿 。
尽管各家的“大炼模型”已经在商业落地上取得了一些成绩,但实际应用情况如何、能解决哪些实际问题仍然在遭受着用户的质疑 。
平安科技前沿技术部门负责人王磊就曾公开指出,当前大规模预训练模型在垂直领域存在“致命”问题 。
他认为,大规模预训练模型在垂直领域性能达不到要求的原因可能是:大规模预训练模型的训练语料库规模很大,既包含了该领域的关键信息也包含了其他无关信息,使得模型缺少对关键信息的关注 。同时,当前大规模预训练模型的机制改进也很少涉及对关键信息的提取 。
相关经验推荐
- 哪些人不适合吃金瓜?金瓜的副作用有哪些
- 特斯拉正式登陆泰国 明年将交付上海工厂制造的汽车
- 王者营地怎么看黑名单列表 怎样查看王者营地的白名单
- 肾蜂蜜的食用方法 蜂蜜正确的食用方法
- 肉末豇豆角的腌制方法 肉末豇豆角的制作方法
- 木薯淀粉怎么做珍珠奶茶 橘子汁木薯淀粉制作珍珠奶茶的方法分享
- 香椿的腌制方法和步骤 腌香椿芽家常做法分享
- 面食福袋制作的方法 面食福袋怎么制作
- 12个迷你蛋挞液的做法窍门 12个迷你蛋挞液的做法窍门是什么
- 腰部的锻炼方法 腰部锻炼方法是怎样的