李论

191

文章/篇

131.8万

阅读/次

拜访信息

为了给您提供更快更好的服务,在获取作者联系方式前,想对您有个简单了解. 邀请您填写如下信息

提交成功

非常感谢您的配合,我们的作者会尽快通过您的微信,
请耐心等待~

微信号

15701235851

公司存在大量数据浪费?那是你的数据库用错了

SaaS自动化
亿欧
李论
2018-02-24 · 14:11
[ 亿欧导读 ] GPU处理大数据已经成为一种趋势。各种深度学习的软件框架例如TensorFlow,需要运行在计算设备上,与CPU相比,GPU更能让其高效的工作,在性价比以及计算力上都有较大的优势。
星爵,人工智能,数据库,GPU,甲骨文,SaaS,服务器

未来几年,全球数据量将呈指数级增长。据IDC统计,到2020年,全球数据总量将达到44ZB,中国数据量将达到8060EB,占全球数据总量的18%。数据,已然对当下的商务、生活乃至方方面面都产生了深远的影响。可众所周知,各行各业数据生产的速度要远远大于数据消化的速度。数据分析处理的不及时,必然造成大量具有时效性数据的浪费,日积月累,这样的不匹配性会越来越严重。

如何消除这样的不匹配性?归根结底,我们需要一种能够对更大规模数据做到更实时更迅捷的分析工具。

顺势而生的GPU数据库

2015年,已经在甲骨文公司工作了6年的星爵意识到,传统的数据库系统需要革新了。传统CPU数据库的发展主要面临两大瓶颈,一是数据计算速度,二是数据访问速度。而负责算力的CPU,目前停留在数十核的规模,这已经接近它的物理极限了。数据库计算领域,是时候该添加新鲜血液了。

2013年,深度学习技术的崛起让人们看到了GPU的力量。在这之前,GPU的主要功能是图片渲染,通过模拟现实场景生成接近于真实景象的图片,主要被应用于游戏领域。而深度学习技术,使GPU“大规模并行计算”的能力得以展现,人们对它的认知终于不再是游戏机,GPU,也可以成为像CPU一样的服务器。而星爵,更是坚定的认为,GPU处理大数据已经成为一种趋势。各种深度学习的软件框架例如TensorFlow,需要运行在计算设备上,与CPU相比,GPU更能让其高效的工作,在性价比以及计算力上都有较大的优势。

没有犹豫,星爵离开甲骨文,回国创立了Zilliz,他要做人工智能时代的数据库系统。

星爵认为,在过去数十年间,人工智能因为CPU架构下计算能力的限制而裹足不前,OLAP数据库技术也因为同样的原因而发展缓慢。就像华岩资本合伙人黄志玮所认为的,我们需要一个基于众核处理器硬件加速的、面向人工智能的新一代OLAIP(On-Line Analytical and Intellegent Processing)数据库系统,而这正是Zilliz在研发的产品。

Zilliz使用众核处理器上的成千上万个处理核心进行超大规模并行数据处理,实现数据库操作的加速,同时提供数据库系统和人工智能计算框架之间的直接数据通道。Zilliz将人工智能处理引擎融合进数据库执行引擎,提供集数据存储、分析、管理、和人工智能处理与一身的OLAIP数据库系统。

星爵向亿欧介绍,Zilliz基于GPU的数据库系统可以比CPU数据库的性能提高100倍,可大范围的应用于金融、电信、互联网以及政府领域。

在商业模式上,Zilliz为各行业的头部客户和互联网公司提供了不同的方案。对于头部客户,Zilliz即可以为其提供私有部署,同时还有基于一体机的解决方案;对于互联网公司,尤其是那些将数据部署在云端的客户,Zilliz可以为其提供SaaS的方案,使用各大云厂商提供的GPU,在云端为客户提供服务,从而使客户无需采购GPU硬件设备便可以使用。

新技术的新“麻烦”

大多数人有这样一个疑问——

即便GPU数据库的使用性能和性价比,与原有系统相比更有优势,但是要让用户将存储在CPU服务器上的数据快速迁移到GPU服务器中,可行性有多大?

这关乎到Zilliz的未来,也是星爵自公司创立之初就在解决的问题。星爵表示,Zilliz并不是要替代原有的CPU方案,而是要在大规模数据的实时性分析方面开创一个新的蓝海市场。

人工智能时代下,数据量将会呈指数型增长。在这样的情况下,各行各业的业务想要得到更好的发展,实时数据分析能力以及实时数据驱动运营能力将是其核心的竞争力,因此,Zilliz产品的存在是有其合理性的。

Zilliz投资人云启资本执行董事陈昱表示,在大数据时代,企业需要一个更大、更快、更强的数据库,人工智能技术的加入,是一种对传统数据库的革新,使数据库产生了更高的效率,这无疑是当下各公司最迫切的需求。

另外,星爵希望将数据库软件做成一个标准件。作为一个底层的数据库软件,需要对外提供标准化的查询语言接口,理想状态应当是用户在接入新数据库的时候,其业务层面不发生改变。因此Zilliz通过产品化与标准化,为用户提供标准SQL接口以及各种ETL工具,从而降低用户在数据迁移过程中的成本,尽量做到“无感迁移”。对于用户来说,相当于更换了一个数据库的软件和引擎,但是其业务层并不会受到影响。

星爵还向亿欧透露,为了更加快速的在CPU处理器与GPU处理器之间进行数据交换,Zilliz与IBM合作生产了数据库一体机,使用NvLink技术,能够大大提升不同类型处理器芯片之间的数据传输速度。

资本认可,行业进入爆发期

目前世界范围内做OLAP GPU数据库加速的公司仅有4家:

OLAP领域融资情况.jpg

星爵介绍,在这一领域,国外从2006年就已经开始有所研究,然而,当时的市场认知度不足,用户对于GPU还停留在游戏处理器的认知上,且高端GPU的市场存量较少,并没有基于GPU部署数据库系统的实力。另一方面,整个生态系统还处于早期的发展状态,各种相关工具及配套软件比较缺乏。基于以上两点原因,国外公司在这一方面并没有太多优势。

到2016年,市场认知才有所好转。从业人员开始意识到GPU也可以做与企业相关的工程(例如深度学习),同时,GPU服务器已经成为常态,各种GPU的生态体系也逐渐完善,种种原因使得2016年成为GPU数据库的元年,至此,资本市场逐渐认可这一领域,GPU数据库进入爆发期。

然而爆发并不意味着竞争,靖亚资本创始人郑靖伟向亿欧介绍,数据库这样底层技术的门槛很高,国内少有人研究。产品的研发与验证都需要一定时间,而对于一般的大型中型公司来说,更换数据库系统需要进行很多的测试来评估流程,一旦被验证,很难再次更换数据库系统提供商。

而2018年,将是GPU数据库在各行各业应用更为广泛的一年。

推荐:安防创新百人会栏目

安防创新百人会

近年来,人工智能正快速渗透到安防行业的各个环节,安防也是目前AI公司争战的主战场。紧跟“新科技、新理念、新政策”,亿欧高度重视人工智能在安防行业的应用落地,并推出《安防创新百人会》栏目。

我们将采访100家安防产业链上下游企业,同时,亿欧将于2018年5月25日在北京举办“亿欧GIIS·安防AI创新千人峰会”,本栏目所采访企业也将是大会重要参与方。

 如果您有合适的企业推荐,或者想加入“亿欧安防AI创新学习群”(余凯、孙剑、徐立、浦世亮、陈宁等行业大咖都在群里),均可联系亿欧记者李论(微信:lilun18846810390)。


当人类从IT时代走向DT时代,当社会从传统互联网时代演进到大数据时代,数据迎来爆发式增长。DT时代的业务也将围绕数据进行,在商业化的视角下,如何让数据变得更有价值,如何把握数据安全重视度上升带来的机遇?

1月18日下午,亿欧将于北京举办“商业视角下的数据应用安全——2019年亿欧企业服务产业升级与创新”沙龙,现场会有信通院、国科嘉和、华为云、国舜股份、明朝万达等企业的创始人、资深专家和投资人出席并进行主题分享,新年我们约一场活动?

报名链接:

https://www.iyiou.com/post/ad/id/767

电脑端-新.jpg

版权声明

本文来源亿欧,经亿欧授权发布,版权归原作者所有。转载或内容合作请点击转载说明,违规转载法律必究。

各工作岗位将被AI取代的概率

选择岗位,查看结果

制图员和摄影师

87.9%

打赏支持

5
5
10
20
50
80
100
其它金额
任意赏:

参与评论

最新文章

关闭

快来扫描二维码,参与话题讨论吧!

快捷登录 密码登录
获取验证码

新用户登录后自动创建账号

登录表示你已阅读并同意《亿欧用户协议》

快捷登录 密码登录

账号为用户名/邮箱的用户 选择人工找回

关联已有账户

新用户或忘记密码请选择,快捷绑定

账号为用户名/邮箱的用户 选择人工找回

快速注册

获取验证码

创建关联新账户

发送验证码

找回密码

获取验证码
账号为用户名 / 邮箱的用户 选择人工找回

未完成注册的用户需设置密码

如果你遇到下面的问题

我在注册/找回密码的过程中无法收到手机短信消

我先前用E-mail注册过亿欧网但是现在没有办法通过它登录,我想找回账号

其他问题导致我无法成功的登录/注册

请发送邮箱到service@iyiou.com,说明自己在登录过程中遇到的问题,工作人员将会第一时间为您提供帮助

账号密码登录

乐乐呵呵@微信昵称

该亿欧账号尚未关联亿欧网账户

关联已有账户

曾经使用手机注册过亿欧网账户的用户

创建并关联新账户

曾用微信登录亿欧网但没有用手机注册过亿欧的用户

没有注册过亿欧网的新用户

先前使用邮箱注册亿欧网的老用户,请点击这里进入特别通道
意见反馈
意见反馈
亿欧公众号 亿欧公众号
小程序-亿欧plus 小程序-亿欧plus
返回顶部