一、 重点事件
ICDE 2019( IEEE International Conference on Data Engineering)
4月8日-9日,全球数据库领域三大*学术会议之一的ICDE 2019顺利在澳门举行,阿里共计1场keynote,1场workshop,1个展位;9日下午4:00-5:30,阿里云在ICDE 2019举办了主题为“云时代的数据库”的专场分享研讨会,并被加入官方授权列表。本次专场研讨会由阿里巴巴集团副总裁、达摩院首席数据库科学家、阿里云智能事业群数据库产品事业部总负责⼈李飞飞博士主持,整场分享讨论会分为两部分。第一部分由数据库事业部几位技术专家分别介绍阿里巴巴在POLARDB for MySQL, POLARDB X, AnalyticDB, 以及智能化自治数据库平台SDDP(Self-Driving Database Platform)等产品和技术的进展;
第二部分由五位学术界知名学者和教授受邀参加作为Panel Discussion的嘉宾,与现场近百位与会者进行了深入交流讨论,专家们对云数据库的趋势给予肯定,大大提升了阿里云数据库在国际市场的影响力。阿里专场得到业界高度关注,展台访客络绎不绝,专场现场气氛热烈,座无虚席
查看详情:https://promotion.aliyun.com/ntms/act/icde.html
https://yq.aliyun.com/articles/698234
二、 重大产品更新
POLARDB
POLARDB重磅推出自定义地址,隔离资源,优化架构提升稳定性
POLARDB数据库是一个由最多16个节点构成的集群,本次发布将支持用户修改自己的连接地址,指定哪些节点提供服务,同时还可以创建多个支持读写分离、负载均衡的集群地址,分别调度到不同的节点,以达到资源隔离的效果。 当前,一个POLARDB集群可支持最多5个访问地址,满足企业级复杂业务场景下多租户的集中化访问诉求。
查看详情:
https://www.aliyun.com/product/news/detail?spm=5176.155538.1357067.6.25077e0dqYuxBM&id=12767
POLARDB 在华北3(张家口)正式开服,全面支持新零售云电商客户
POLARDB 具备容量大(最高100T)、弹性快(添加只读节点5分钟)、只读高可用、性价比高等优势,非常符合电商行业的业务场景,尤其是在大促时可以快速弹性,既保障了业务稳定又避免了前期过高的成本投入。POLARDB 完全兼容MySQL,不需要修改程序或配置即可直接替换原来的MySQL,目前已经在华北3正式开服,新零售云(聚石塔)客户可以直接选购。
查看详情:https://www.aliyun.com/product/news/detail?id=12715
ADB
分析型数据库 AnalyticDB 正式完成品牌统一
FY20秉着产品化、聚焦、被集成的策略,数据库事业部OLAP团队完成分析型数据库 (AnalyticDB) 品牌统一:原ADS正式更名为分析型数据库 MySQL 版 (AnalyticDB for MySQL), 原 HybridDB for PostgreSQL 更名为分析型数据库 PostgreSQL 版 (AnalyticDB for PostgreSQL)。 AnalytiDB for PostgreSQL 开源生态好、具有 Oracle 高度兼容的特色,在中小客户输出体量上短平快;AnalytiDB for MySQL 擅长主打大规模、高并发、非结构化融合等高挑战和新场景。数据库事业部OLAP团队接下来将集中力量专注打造上述两个分析型数据库产品。
RDS
RDS SQL Server 2008R2 大版本升级 及 性能洞察
微软将于今年 7 月后停止 SQL Server 2008 的补丁技术支持,针对这一政策阿里云推出SQL Server 2008R2升级版本功能,您可借助此功能实现一键升级数据库版本到2016标准版、2016企业版、2012企业版。新版本相比2008R2支持了更多的功能,包括变更数据跟踪、链接服务器、分布式事务等,以及支持更高的权限,默认授予用户数据库所有者权限。 新版本更支持性能洞察(Performance Insights),是CloudDBA里专注于RDS实例负载监控、关联分析、性能调优的利器,以简单直观的方式帮助用户迅速评估数据库负载,找到性能问题的源头,提升数据库的稳定性。
查看详情:https://www.aliyun.com/product/news/detail?id=12406
https://www.aliyun.com/product/news/detail?id=12478
RDS PostgreSQL 5月17号发布逻辑订阅功能,增加时序插件TimescaleDB支持时序类数据
客户价值:
1、用户在全国多个区域部署的业务,可以通过逻辑订阅,共享数据,实现单元化部署架构。
对于卫星架构的业务,使用逻辑订阅可以将中心的数据共享给地市,也可以将地市的多个库的数据汇聚到中心库进行实时分析查询。
2、通过timescaledb插件,用户可以在PG数据库中高校的存储、检索时序数据,同时支持时序数据的准实时自动化流式聚合。
发布功能支持版本:
1、RDS PG 10 基础版开放rds_superuser角色的逻辑订阅功能,在不借助其他产品的情况下支持在多个RDS PG实例之间实现准实时表级单向同步。 用法请参考阿里云RDS PG用户帮助手册。
2、RDS PG 10 基础版与HA版,新增timescaleDB插件1.3.0版本,支持时序数据的自动分片、高效写入,检索,准实时聚合。用法请参考阿里云RDS PG用户帮助手册。
查看详情:https://www.aliyun.com/product/news/detail?id=12910
RDS PostgreSQL及PPAS 支持只读实例
针对业务读压力大,可以使用只读节点分担读压力。 RDS PostgreSQL及 PPAS 10以上HA版本已经支技同 Region的多可用区部署,如果业务上有更高的可靠性需求,还可以通过创建只读实例,构建在异地的灾备节点。通过只读节点,PostgreSQL 及 PPAS 用户可以随时实现读能力的横向扩展,为企业大促活动及突发的业务性能提供一站式解决方案。
RDS SQL Server 支持最大4T存储空间
企业级数据库对大空间有很大的诉求,希望能够在一个数据库保存所有企业数据。RDS SQL Server 支持最大4T存储空间,适用于2012及以上的高可用版实例和集群版实例,满足大企业对大数据量的存储需求。目前2012及以上基础版实例最大支持3T空间,因此更高空间需求的用户建议升级到高可用版或集群版,SSD云盘存储和ESSD云盘存储都支持4T空间。
查看详情:https://www.aliyun.com/product/news/detail?id=12725
RDS SQL Server 支持SSL加密实现更高访问链路安全性
安全性是数据库的核心特性,访问数据库的链路安全是保障访问请求不被篡改的重要方法。RDS SQL Server 全系列所有版本支持数据库访问连接利用SSL加密功能。当用户需要加强数据库访问的安全性时候,可以通过数据库安全性页SSL标签中打开SSL加密,以提高数据库连接安全性。SSL加密功能一旦打开就不能关闭,并且只能对一个访问连接加密,如当给外网连接加密后则无法同时给内网连接加密,当然基于安全性考虑不建议数据库开通外网连接。
查看详情:https://www.aliyun.com/product/news/detail?id=12670
NOSQL
Redis 发布全新 5.0 版本
Redis 5.0是Redis产品的重大版本发布。新增的stream数据结构,带来全新的应用场景,提供更为丰富的想象空间;多项内核优化,使产品更稳定更安全;账号体系支持多业务跨账号管理,更加安全;审计日志,记录了读写操作、敏感操作(keys、flushall等),提供事后回溯能力;慢日志查询,提供性能定位依据;大key分析,基于快照的完整内存分析,更准确,直接输出内存消耗top排行的key,方便客户针对性的进行业务优化;全新 Redis 5.0 版本为企业云上缓存提供了全新的选择。
查看详情:https://promotion.aliyun.com/ntms/act/redis5.html
Redis 发布性能增强版
Redis 因为稳定高效,接口便利,成为数据库缓存的最佳选择,但是单线程处理模式限制了Redis 的吞吐能力,单节点综合 QPS 稳定在10万左右,在互联网下超高并发的业务场景下容易产生性能瓶颈。针对这一问题阿里云推出了基于网络IO多线程改造版的性能增强版本,将IO事件多线程化,极大提升了Redis的吞吐能力,对比社区版,性能提升3倍,同时 100% 兼容 Redis 协议,让您没有后顾之忧轻松应对超高并发的缓存场景。
查看详情:https://www.aliyun.com/product/news/detail?id=12770
MongoDB支持多网并存,内网免密,实现安全能力和使用体验的融合
研发人员在使用MongoDB时常使用默认免密连接方式实现快速的配置接入,但常因管理需要也同步开启公网访问,导致数据库免密暴露在公网环境中,被黑客所攻击。云数据库MongoDB发布支持内网免密功能,自动识别检测流量来源,对内网流量开启免密,对公网流量开启强验证,方便客户在各类场景下的运维管理。
查看详情:https://www.aliyun.com/product/news/detail?id=12807
生态和工具
云数据库与阿里巴巴小程序解决方案全面合作
云数据库通用引擎MySQL、MongoDB等因普适性和灵活性广泛应用在小程序领域。阿里云小程序解决方案与云数据库产品全面合作,当前已经上线云应用部分由客户自行购买低配服务器及数据库部署应用,已集成通用MySQL数据库;即将上线云开发,对用户提供类serverless的部署方式,底层将采集成MongoDB,依赖单库恢复、请求超时自动kill等多租户场景能力。
数据传输服务DTS上线跨云迁移方案,支持Redis4.0及Redis Cluster的上云迁移等
数据传输DTS
1) 上线跨云迁移解决方案,帮助用户便捷得完成AWS及腾讯云数据库到阿里云数据库的数据迁移。
2) 支持数据迁移的监控报警功能,包括迁移状态及延迟的报警监控,帮助企业用户轻松管理迁移任务。
3) 数据传输DTS数据迁移支持Redis4.0及Redis Cluster的上云迁移,包括全量数据迁移及增量数据同步,帮助用户在业务零停机的情况下,实现Redis的平滑上云迁移。
4) 支持MySQL->AnalyticDB For PostgreSQL数据实时同步,包括全量数据初始化及增量数据同步。帮助用户将线下自建数据库/其他云厂商数据库/ECS自建数据库/RDS的数据实时同步至AnalyticDB For PostgreSQL,快速构建实时数据仓库
• 数据库管理DMS上线性能诊断优化
数据管理DMS支持性能诊断优化,帮助企业用户快速识别性能瓶颈,并自助完成性能优化,保障业务稳定性。
• 数据库备份DBS支持云Redis、PostgreSQL全量备份,发布OpenAPI
数据库备份DBS
1) 上线云Redis全量备份功能,满足客户进行数据长期归档和异地备份的安全合规需求。
2) 上线PostgreSQL全量备份恢复功能,支持9.2/9.3/9.4/9.5版本,帮助PostgreSQL用户轻松实现数据备份恢复。
3) DBS发布OpenAPI,支持备份恢复任务的创建及管理,帮助企业客户快捷得创建并管理数据备份。
混合云数据库管理HDM支持慢SQL排行榜、Redis BigKey诊断、Redis 实例会话分析
混合云数据库管理HDM
1) 支持MySQL慢SQL排行榜功能,帮助用户快速识别慢SQL数量最多的实例,快速识别性能瓶颈,提升企业客户的数据库管理体验。
2) 支持云数据库Redis Bigkey分析, 帮助用户快速分析Key分布,识别BigKey,轻松解决BigKey引发的性能问题。
3) 支持Redis实时会话分析,用户可直接通过HDM分析并管理实例会话,有效提升用户管理效率。
查看详情:https://www.aliyun.com/product/news/detail?id=12602
OLAP
阿里云OLAP数据库产品正式集成至Dataworks
阿里云OLAP数据库产品(分析型数据库MySQL版、分析型数据库PostgreSQL版、Data Lake Analytics)正式集成至Dataworks。Dataworks作为一站式数据开发平台, 为OLAP数据库产品提供了数据接入、ETL节点调度管理、数据服务发布等诸多实用核心功能,进一步提升了OLAP产品的数据开发体验。
● TSDB for InfluxDB® 版上线公测
时序数据库TSDB for InfluxDB®版正式上线公测,相比开源InfluxDB版本,具备开箱即用、零运维、数据高可靠、弹性伸缩和24小时专家支持服务的优势。InfluxDB®版的发布丰富了阿里云时序数据库的产品形态。
查看详情:微信版
公测链接:https://common-buy.aliyun.com/?spm=5176.11451019.0.0.144575d16d7RE1&commodityCode=hitsdb_influxdb_pre&accounttraceid=7545ae3e-f0e4-4df9-a0fc-b931328048fd#/buy
三、 重大技术更新
分析型数据库AnalyticDB for MySQL 正式荣登TPC_DS榜首
分析型数据库AnalyticDB for MySQL在4月正式通过TPC组织的TPC-DS权威认证, 进入TPC-DS官方榜首,成为全球第一家通过TPC第三方严格审计认证的云上数仓产品。TPC(事务性能管理委员会)的TPC-DS标准是数据库界最难的一个测试标准之一,进入TPC_DS榜首将大幅度提升AnalyticDB for MySQL的全球影响力和全球客户选型认可度。
RDS MySQL数据库代理升级
为提供更出色的稳定性和性能,阿里云将对部分RDS实例进行网络连接模式升级,即从高安全模式(数据库代理)升级到高性能模式(标准模式)。升级后的优势:
【稳定性】升级后网络链路少一次跳转,极大提高了稳定性。
【性能】升级后网络链路少一次跳转, 响应时间平均减少20%,性能明显提升。
RDS PostgreSQL 时空 Ganos 引擎提供 GPU 规格支持
作为云计算平台中首个支持 GPU 异构计算的数据库产品,阿里云 RDS PostgreSQL 提供最高50倍性能提升,基于阿里云自研Ganos ,协助商用GIS、时空计算领域提供强大的计算能力:
纯计算角度,以遥感影像三次卷积重采样为例,GPU并行加速较CPU平均提升50倍左右,且随数据量越大、计算越复杂,提升效果越明显。
全链路角度,当数据存储在SSD云盘时,遥感影像入库(含索引创建)GPU较CPU快9-15倍;当数据存储在OSS时,数据入库全流程GPU较CPU加速4-7倍。
查看详情:https://www.aliyun.com/product/news/detail?id=12300
MongoDB物理级单库恢复全网开放
业务在使用过程中常因误操作等行为需要进行备份恢复,常规恢复方式需要恢复出全量备份数据后,再从中找出所需数据,耗费较长时间。MongoDB物理单库级别恢复能力,支持用户在进行恢复时,仅恢复数据库出错的数据库数据,相比全量数据恢复有3-5倍的效率提升。当前刚功能已经开放支持阿里云全球Region的MongoDB实例。
四、 前沿技术突破与发布
AnalyticDB产品论文被VLDB正式收录
《AnalyticDB: Real-time OLAP Database System at Alibaba Cloud》被 VLDB 2019 “Industrial and Applications Track”正式收录,属于国内大规模商用数据库系统详细技术介绍的第一篇CCF-A类论文。
随着数据的规模和多样性的激增, OLAP 数据仓库在实时服务中发挥着越来越重要的作用。客户期望数据仓库支持高查询并发和写入吞吐量,以及结构化和复杂数据类型。AnalyticDB已经在阿里云上为众多客户提供服务,能够保存100万亿行的记录(10PB+),同时提供10M以上TPS 写入和100k以上QPS查询,并能在数百毫秒内完成复杂的查询。
自2012年启动研发到现在,AnalyticDB的技术沉淀和商业实践得到了学术界的认可。本篇VLDB收录论文详细介绍了阿里云分析型数据库AnalyticDB,包括支持大规模的高查询并发性和写入吞吐量的读写分离架构,提供低延迟复杂查询的全索引引擎,支持快速检索结构化和复杂数据类型的行列混合存储,以及感知存储特性的SQL优化器和执行引擎等。
五、 销售赋能
数字中国行-数据库技术沙龙(成都站)
2019年4月26日,汇聚互联网、金融、新零售、软件开发等等各个行业80多位技术大咖的阿里云技术沙龙在成都蚂蚁c空间101,隆重举行。现在我们的客户朋友们一起聆听了来自阿里云数据库团队的专家们的精彩分享。客户对阿里云专家团队的分享表示很感兴趣,从阿里云数据库的现状与未来、阿里云MongoDB如何助力企业搭建敏捷架构、到原生数据库POLARDB剖析、Redis打造性能机制的分享,直切技术热点、客户痛点。最后环节专家团也与现场各企业的技术负责人进行了长达一个小时的一对一交流,当场有10多家企业表示希望测试阿里云数据库产品(包括但不仅限于POLARDB、MongoDB、Redis等),并期望进一步的合作洽谈
六、客户案例
客户案例:阿里云HBase助力广州游爱网络科技业务快速增长
广州游爱网络技术有限公司是一家集游戏研发与发行于一体的手游公司,由于游戏运营变化快,需要灵活的 Schema。在线用户基数大,日志规模大,需要高吞吐低成本处理平台,同时支持在线型和离线型业务场景。
解决方案:
如上图:
阿里云HBase 能够适应业务的快速变化,支持灵活的 Schema 动态列等;
阿里云 HBase支持海量数据实时写入,百万/千万并发, PB 级存储,同时HBase 支持冷热数据分离,通过直接读写 0SS降低日志存储成本。
X-Pack Spark 和阿里云HBase 无缝衔接,支持数据工作台、作业调度、 SQL、支持构建离线数仓等;通过 X-Pack Spark Streaming 进行实时 ETL, 并将结果写入阿里云HBase;通过X-Pack Spark 进行离线分析解决客户的报表等需求。
客户价值:
阿里云HBase 满足客户的业务快速增长以及高并发的需求
通过阿里云HBase + X-Pack Spark 完美解决客户的实时ETL 以及离线分析等需求,将客户的各种需求形成闭环。
● 客户案例:广告行业某客户落地Serverless数据湖方案
采用Data Lake Analytics方案,客户基于ECS自建系统全部下线,实现零维护成本,云上月开销成本节省4倍,同时数据清洗、分析性能提升4倍;全SQL化接口和MySQL工具链的全面兼容,让客户完全专注业务数据逻辑,充分激活日2000亿级数据记录的价值,加速赋能上、下游广告客户群体。
客户案例:上海通麦 AWS 搬站(不确定可否对外宣传)
MyToken在迁移前,数据库部署状况(IDC机房) MySQL 数据库 20 套+、 Redis 数据库 10套,AWS 数据库使用成本较高,国内服务响应效率一般
解决方案:阿里云数据库稳定性与成本均优于 AWS ,拥有成熟的数据库异地灾备及双活方案,成熟的 0 停机数据库迁移方案 。阿里云Redis 提供数据持久化能力,提高性价比及数据安全性
客户收益:
迁移时业务停机时间短,提升业务系统的高可用性和数据库灾备能力。利用阿里云 ROS 的读写分离及快速弹性,随时应对业务变化的需求。通过 ROS + Redis 的数据库综合解决方案,提升了业务服务的时效性。利用阿里云数据库完善的数据安全机制(如: SQL 审计、白名单控制、数据库备份及恢复等),帮助客户保证了核心业务数据的安全
● 客户案例:上海宝信
上海宝信利用TSDB搭建工业物联网平台,利用时序数据库TSDB强大的写入能力对钢铁制造过程中的关键工艺指标进行实时采集,通过TSDB高效查询进行实时的生产过程监控,利用TSQL强大的数据分析能力实现生产过程的关键特征计算提取,实现实时的生产质量评估。
● 客户案例:智享新电
智享新电是新能源行业的物联网创业企业,通过TSDB搭建物联设备管理和监控平台。利用TSDB 时间截面数据处理能和数据聚合分析能力,实现新能源设备的远程实时监控和故障定位分析及业务大屏展现。