玄彬资料大揭秘！

<随心_句子c><随心_句子c><随心_句子c><随心_句子c><随心_句子c>多(duo)篇(pian)論(lun)文(wen)入(ru)選(xuan)SIGMOD，華(hua)為(wei)雲(yun)GaussDB底(di)氣(qi)何(he)來(lai)？

6月(yue)20日(ri)-25日，2021 ACM SIGMOD 在(zai)西(xi)安(an)舉(ju)行(xing)。22日，华为GaussDB內(nei)核(he)首(shou)席(xi)架(jia)構(gou)師(shi)任(ren)陽(yang)將(jiang)受(shou)邀(yao)參(can)會(hui)並(bing)分(fen)享(xiang)华为新(xin)壹(yi)代(dai)自(zi)研(yan)分布(bu)式(shi)數(shu)據(ju)庫(ku)GaussDB的(de)最(zui)新探(tan)索(suo)和(he)研究(jiu)成(cheng)果(guo)，展(zhan)示(shi)GaussDB相(xiang)關(guan)论文入选SIGMOD等(deng)國(guo)際(ji)頂(ding)級(ji)學(xue)術(shu)会議(yi)的成果。

数据库創(chuang)新從(cong)来不(bu)是(shi)一蹴(cu)而(er)就(jiu)，而是千(qian)錘(chui)百(bai)煉(lian)後(hou)的厚(hou)積(ji)薄(bo)發(fa)，是百尺(chi)竿(gan)頭(tou)更(geng)進(jin)一步(bu)，国產(chan)数据库的崛(jue)起(qi)和发展如(ru)此(ci)，华为云GaussDB也(ye)是如此。

圍(wei)繞(rao)AI-Native課(ke)題(ti)研究，今(jin)年(nian)华为云GaussDB相关论文被(bei)入选SIGMOD国际顶级会议，其(qi)研究论文《Learned Cardinality Estimation for Similarity Queries》提(ti)出(chu)使(shi)用(yong)DNN进行基(ji)数預(yu)測(ce)，为了(le)解(jie)決(jue)DNN訓(xun)練(lian)問(wen)题，创新地(di)提出了模(mo)型(xing)分割(ge)和数据分割解决方(fang)法(fa)，同(tong)時(shi)在此基礎(chu)上(shang)提出了使用該(gai)方法进行連(lian)接(jie)操(cao)作(zuo)結(jie)果集(ji)预测。该方法在BMS、GloVe300、ImageNetde等数据集上取(qu)得(de)了很(hen)好(hao)的效(xiao)果。

作为数据库領(ling)域(yu)公(gong)認(ren)的最具(ju)学术影(ying)響(xiang)力(li)地位(wei)的国际性(xing)学术会议，SIGMOD與(yu)ICDE、VLDB并稱(cheng)为国际数据库三(san)大(da)顶级会议。华为云GaussDB基於(yu)AI-Native理(li)念(nian)，近(jin)年在SIGMOD、VLDB等会议上发表(biao)了数篇论文，如《Interactively Discovering and Ranking Desired Tuples without Writing SQL Queries》，《Query Performance Prediction for Concurrent Queries using Graph Embedding》，《QTune: A Query-Aware Database Tuning System with Deep Reinforcement Learning》以(yi)及(ji)《An End-to-End Learning-based Cost Estimator》等，分別(bie)就数据库優(you)化(hua)器(qi)相关问题提出了AI技(ji)术解决方案(an)，在RBO、CBO基础之(zhi)上提出了基于AI技术的AI优化器，簡(jian)称为AIBO（AI Based Optimizer），使得数据库中(zhong)从数据分布估(gu)計(ji)、代價(jia)估计、執(zhi)行计劃(hua)选擇(ze)等各(ge)個(ge)階(jie)段(duan)均(jun)使用AI技术，在该领域取得了很好的突(tu)破(po)。

华为歷(li)来重(zhong)視(shi)与高(gao)校(xiao)、合(he)作夥(huo)伴(ban)共(gong)建(jian)良(liang)好生(sheng)態(tai)关系(xi)，积極(ji)促(cu)进数据库领域開(kai)源(yuan)、开放(fang)、融(rong)合、创新发展。在同清(qing)华大学数据库組(zu)的合作中，华为进一步围绕AI-Native理念，在GaussDB的开源版(ban)本(ben)openGauss社(she)區(qu)中，使用AI技术對(dui)数据库的眾(zhong)多模塊(kuai)进行了重构，例(li)如使用MCTS方式代替(ti)数据库优化器中基于規(gui)則(ze)的邏(luo)輯(ji)重寫(xie)，使用Tree-LSTM代替原(yuan)始(shi)的基于直(zhi)方圖(tu)的代价估计，使用深(shen)度(du)強(qiang)化学習(xi)方式代替原始的Greedy/Genetic算(suan)法。

同时为了提升(sheng)数据库自治(zhi)能(neng)力，先(xian)后提出使用Extreme Value Theory进行数据库異(yi)常(chang)檢(jian)测，使用LSTM+KNN的方式进行系統(tong)异常診(zhen)斷(duan)，使用Tree-LSTM方式进行SQL诊断，使用深度强化学习及RNN的方式进行系统自調(tiao)优，物(wu)化视图推(tui)薦(jian)及索引(yin)推荐，使用GNN的方式进行系统性能预测。相关技术陸(lu)續(xu)在實(shi)际生产系统中使用，例如索引推荐功(gong)能，在客(ke)戶(hu)負(fu)載(zai)性能提升的基础上，消(xiao)除(chu)了83%的索引冗(rong)余(yu)，索引空(kong)間(jian)磁(ci)盤(pan)占(zhan)用率(lv)降(jiang)低(di)70%。

此外(wai)，华为在同清华以及CCF数据库專(zhuan)委(wei)会的合作中，陆续产生众多的科(ke)研成果，先后在SIGMOD、VLDB、ICDE上发表论文36篇，CCF-华为数据库创新研究计划總(zong)共資(zi)助(zhu)20項(xiang)数据库相关研究课题，成果覆(fu)蓋(gai)数据库多模、云数据库、数据库全(quan)密(mi)态處(chu)理、图数据库等，极大的活(huo)躍(yue)了openGauss开源社区以及国内数据库研究发展。

6月22日，在本次(ci)SIGMOD 2021大会上，华为GaussDB内核首席架构师任阳将会帶(dai)来《华为自研分布式数据库》主(zhu)题分享，内容(rong)覆盖华为自研分布式数据库的发展和使用現(xian)狀(zhuang)，以及GaussDB极致(zhi)性能、混(hun)合负载、高安全等特(te)性，更多精(jing)彩(cai)，敬(jing)請(qing)关註(zhu)！

嘉(jia)賓(bin)简介(jie)：

2014年9月至(zhi)2019年10月，擔(dan)任分布式分析(xi)型数据库架构师与系统组组長(chang)，完(wan)成华为公司(si)自研超(chao)大规模并行数据倉(cang)库产品(pin)設(she)计与实现，完成GaussDB(DWS)数据仓库在工(gong)商(shang)銀(yin)行的规模商用。之后担任华为GaussDB自研分布式数据库首席架构师及内核系统组组长，在性能、混合负载能力、容災(zai)能力、安全能力以及易(yi)運(yun)維(wei)能力方面(mian)构築(zhu)数据库内核核心(xin)競(jing)爭(zheng)力。

议题简介：

本议题将会介紹(shao)华为自研分布式数据库的发展和使用状況(kuang)，并围绕高性能、高可(ke)用、混合负载、安全以及易运维五(wu)大特性进行技术介绍，向(xiang)大家(jia)全方位展示GaussDB分布式数据库。當(dang)前(qian)GaussDB分布式数据库及其开源版本openGauss相繼(ji)在国内头部(bu)银行客户上線(xian)并规模使用。

點(dian)擊(ji)鏈(lian)接预約(yue)直播(bo)：https://live.bilibili.com/21945422返(fan)回(hui)搜(sou)狐(hu)，查(zha)看(kan)更多

責(ze)任編(bian)辑：