墨芯 x 机器之心:首个稀疏化计算专栏上线 | 创享Family

创享投

creationventure

本文中「墨芯人工智能」为创享投资已投项目:

墨芯人工智能科技(深圳)有限公司(以下简称墨芯)是一家AI芯片设计商,提供终端和云端AI芯片加速方案,打造新一代AI计算引擎。应用聚焦于安防、自动驾驶、IoT物联网等领域。墨芯将于2021年中后期发布产品安腾(Antom)芯片。

1.jpg


今天,墨芯人工智能联合权威媒体机器之心,发布稀疏化计算专栏。
 
墨芯人工智能创立于2018年,是稀疏化计算的全球领导者。墨芯将在该专栏中,与您分享稀疏化计算的产业前沿洞察,探索我们如何帮助企业在数字化转型中,拥有更高效、更精准、更经济、更绿色的AI算力。
 
在开篇,我们会简单介绍稀疏化是什么,为什么它是AI计算的未来。本文还会介绍墨芯人工智能在此领域的最新产业实践——正因为在稀疏化在理论和产业实践上的积极探索,墨芯入选机器之心《2021-2022年度AI技术趋势报告》。


人工智能“动脑”  背后算力消耗惊人


人类一直梦想着能制造出一台“会思考”的机器。
 
2016年,阿尔法围棋(AlphaGo)成为第一个战胜人类围棋世界冠军的人工智能机器人,意味着人工智能可以匹敌、甚至超越人类智慧。
 
但它做到这一点,耗费惊人。
 
2017年10月,DeepMind团队公布了最强版阿尔法围棋AlphaGo Zero。据估算,AlphaGo Zero整体训练过程使用了数千个TPU,算力成本高达3500万美元,且能耗巨大,约等同于12760个人类大脑3天不眠不休所耗费的能量。
 
窥一斑而知全豹:AI时代对于算力的需求是空前的。诺贝尔经济学奖获得者William D. Nordhau提出:“算力是设备每秒可处理的信息数据量”。这里所说的设备,包括算力实现的硬件载体,即各类计算芯片。
 
过往芯片算力性能的提升遵循芯片业黄金法则摩尔定律:每18个月左右芯片算力翻1倍。而AI时代的算力需求增长远高于这个速度。埃隆·马斯克创立的Open AI称,自 2012 年以来,在大型 AI 训练中用到的计算量每3.5个月就翻1倍。

“相比云计算和大数据等应用,AI对算力的需求几乎无止境。”中国工程院院士、浪潮集团首席科学家王恩东指出。由此可知,遵循摩尔定律的算力发展,远远无法满足AI时代的算力需求,这已是业界共识。


一个聪明的解决方案


为满足AI应用所需要的算力,业界需要突破摩尔定律,从超越芯片硬件本身来找寻高性能计算解决方案。来找寻高性能计算解决方案。不仅如此,我们还需降低算力大幅增长带来的负面效应,如高成本和高能耗等,避免给地球带来沉重负担。从算法入手来解决算力问题,如稀疏化计算是其中最具潜力的解决方案。
 
稀疏化算法技术诞生于美国1950年代,近年来,AI的迅速发展让稀疏化的地位快速提升。

2022年春,谷歌大脑负责人Jeff Dean也指出了稀疏化在AI计算未来发展中的重要性。他撰文回顾了人工智能深度学习的黄金十年,强调了从软件和算法出发,软硬件融合发展是核心,并判断未来三个富有潜力的研究方向为:稀疏模型、自动化机器学习(AutoML)和多任务训练。

稀疏化的优势已被业界主流认识到,那么稀疏化的技术原理是怎样的?

 

什么是稀疏化


稀疏化计算的技术原理是指在原有AI计算的大量矩阵运算中,将含有零元素或无效元素剔除,以加快计算速度。比如在人脸识别的场景中,传统算法会将图片中的每一个元素输入模型,然后计算结果。而稀疏化计算,会先在图片中找出人脸相关的有效元素,然后输入模型得到结果。

简而言之,它能让神经网络模型消减冗余和重复的内容,减少运算压力,通过改变模型的特性,进而大幅提高算力,降低能耗。

从全球领先算法技术到商业落地,墨芯将在稀疏化计算专栏中,为您实时分享我们对稀疏化技术的产业探索,期待有志同道合的伙伴加入我们,共同推动AI计算产业前沿。

 



创享投资是专注早期投资的创投机构,持续在文创消费、科技创新两大赛道深耕,挖掘高成长性的投资机会。洞察融合商业模式的核心价值,创享围绕“文化+消费”、“科技+产业”两大战略赛道,在文创消费、数字经济、新一代信息技术、碳中和能源等核心行业,实现了精准的投资布局,挖掘行业内优秀的创业领袖。
自成立以来,创享持续在文创消费、创新科技领域进行前瞻性布局投资,投资了超过80家优秀创业,代表性投资案例包括:欢瑞世纪(000892)、崇达技术(002815)、天上友嘉、摩奇卡卡、墨芯、轻橙时代、列拓科技、天狼芯半导体、动图宇宙、重力聿画、PKFARE比客、绽放文创、艾葵斯、哇哇鱼等八十余个项目。
秉承着“做创业者背后的支持者”的企业理念,我们时刻关注有创业及实干梦想的团队。通过自身丰富的企业经验和深厚的多方资源,为被投企业提供系统化的投后服务,扶持企业快速成长。