天天看点

数据库产品事业部月刊(2019年7月)

一、重点事件

阿里云峰会·上海站 & 开发者大会(7月24日-25日):

7月24日,阿里云开发者大会数据库专场圆满落幕,专场内容包括云数据库架构和演进、POLARDB、AliSQL 8.0的特性和改进、AnalyticDB for MySQL:PB级云数仓核心技术和场景解析、Cassandra技术架构及最佳实践、企业级数据库新型研发模式(数据管理DMS)等新品内容介绍,以及数据库平滑上云的最佳实践。

除专场外,大会还设置了“大师零距离”环节,现场讨论非常热烈;动手实验环节包括两个体验主题:1、POLARDB在读写分离情况下,动态增加只读节点的能力,能够做到线性扩展;2、AnalyticDB演示分析性能,对比同样数据集上同样的SQL语句,查询性能对比MySQL;

7月25日,阿里云峰会主论坛上虎扑CTO站台,讲述核心系统全量业务上云的故事,阿里云数据库的弹性资源助力虎扑轻松应对赛事决战时刻,重点强调“高性能、高可靠、低成本” 三大关键词,飞刀重点介绍了阿里云数据库核心数据库产品(POLARDB、DTS、RDS)。

数据库产品事业部月刊(2019年7月)
数据库产品事业部月刊(2019年7月)

开发者大会报道:

https://mp.weixin.qq.com/s/dc6LxLe1ARztt5I2jKuc-g

阿里云峰会主论坛报道:

https://mp.weixin.qq.com/s/CRz_2MpOaqe7X5oK6Bf20Q

PostgresConf(7.3-7.7日):

阿里云作为钻石赞助商出席PostgresConf.CN2019大会,该大会代表全球最高级别的PG会议组织。会上,阿里云获得PG中国开源联盟的认可并斩获两项大奖:ADAM——Oracle迁移PostgreSQL评估改造方案获得“PG年度创新解决方案奖”,  德哥荣获“PG行业杰出贡献奖”。

飞刀在主论坛发表重要演讲,分享《下一代云原生数据库技术趋势及阿里云PostgreSQL生态》并接受了媒体专访,强调阿里云高度重视开源数据库的发展,长期贡献PostgreSQL社区;阿里云数据库产品是一个完整的生态体系,PostgreSQL相关产品更是阿里云数据库生态中不可或缺的重要组成;阿里将继续赋能PG社区,回馈开源。除此之外,阿里云数据库还有3场技术演讲以及1天的全天培训。

数据库产品事业部月刊(2019年7月)

查看详情:

https://mp.weixin.qq.com/s/fdLJo5oK0Rsz2kEq-dKLvw

阿里云峰会(7月31日@马来西亚):

7月31日,阿里云马来西亚峰会在吉隆坡召开。上午的主论坛上,飞刀代表核心技术互联网化发表主题演讲《Evolving Databases for the Cloud》,他表示:“作为亚太地区第一的云服务提供商,阿里云数据库已为多家马来西亚知名企业提供技术支持,助力企业用户和合作伙伴加速上云,推动交通、金融等多个行业的数字化转型。” 

在下午的分论坛上,德迈就阿里云数据库典型客户遇到的挑战、解决方案和技术亮点、安全性进行详细解读。

https://mp.weixin.qq.com/s/xtPUtHF_HnAdPPjpf1h_rw

HBaseCon Asia 2019 (7月20日):

HBaseCon Asia 2019峰会于7月20日在京顺利举行,活动规模超过500人,阿里云数据库通过近5场的Keynote和专场技术演讲,向社区阐述了阿里HBase、大数据/数据库技术能力(X-Pack)和生态布局,以及我们未来在云产品上演进方向。此次大会面向Hadoop、HBase等企业用户群体,通过联合Apache HBase社区官方,有效地提升了阿里在整个Hadoop生态圈的技术影响力,以及在开源上的发展和形象。

https://mp.weixin.qq.com/s/LJLhcs-eVr4ucXrJjFYlQA

分析型数据库MySQL版 v3.0正式商业化(7月31日)

7.31⽇,阿⾥云PB级实时数据仓库AnalyticDB for MySQL 3.0版正式商业化。全新的AnalyticDB采⽤分布式云盘三副本机制,为企业客户提供99.9999999%的数据可靠性保证。此外,性能⼤幅度提升,基准测试写⼊性能提升50%,查询性能提升40%。实例存储空间可变,支持灵活控制CPU、存储 和内存配⽐,全⾯兼容MySQL、数据类型更完备。更简单易⽤,使得企业客户像开启MySQL⼀样,使⽤数据仓库!AnalyticDB for MySQL 3.0发布会于当天下午15:00-16:30举行,吸引了线上众多开发者观看,线上直播浏览6071人次。

发布会回放:

https://yq.aliyun.com/live/1256 https://promotion.aliyun.com/ntms/act/analyticdbnew.html

二、重大产品更新

POLARDB:云原生数据库

POLARDB 全新推出存储资源包,灵活售卖进一步降低企业成本

POLARDB的存储空间可实现自动、无损的弹性伸缩,且默认采用按实际使用量计费方式,对初创型企业非常友好。但随着服务的客户越来越多,有超大容量诉求的客户,以及需要预付费购买方式的传统企业越来越多,所以我们推出了这种预付费模式的存储资源包。

相比于普通的单实例存储空间,存储包在用户体验上也做了大量的改进。用户可以购买一个存储包,同时被POLARDB for MySQL、POLARDB for Oracle、POLARDB for PostgreSQL共享,也可以被分布在国内多个地域的实例共享,大大降低了用户的管理成本。存储包支持从100G到100T,共9个规格,容量不够可以随时升级。

数据库产品事业部月刊(2019年7月)

参考文档:

https://help.aliyun.com/document_detail/127290.htm

POLARDB 上线『临时升级』功能,应对用户短期的业务峰值

弹性快是POLARDB的云原生核心优势之一,为了更好地发挥弹性的优势,POLARDB结合类似于『双11』的大促场景,推出了临时升级的功能。临时升级只需要支付升级期间的费用,按小时折算差价,可大幅降低企业的运营成本。

数据库产品事业部月刊(2019年7月)
https://help.aliyun.com/document_detail/123826.html

POLARDB 新加坡开服,首个海外Region上线

为满足客户在海外对大容量云原生数据库的需求,持续提升在国际范围的影响力和竞争力,POLARDB完成了海外第一个地域(新加坡)上线售卖。在接下来的几个月内,会持续开拓印尼、美国、印度、马来西亚等新地域,加深全球化布局。

OLAP:新一代在线交互式实时数仓

分析型数据库MySQL版 v3.0正式商业化

分析型数据库PostgreSQL版发布列粗糙集索引支持(meta scan),重I/O查询性能提升3倍

分析型数据库AnalyticDB for PostgreSQL在列存储基础上,引入多种粗糙集过滤支持,在列存储扫描过程中,自动化实现多种预聚合和数据块过滤操作。其通过在既有实例的列存表上增加meta table,实现既有实例的就地升级。 TPC-H Benchmark 在 SATA实例规格下性能提升 30%,重 I/O查询场景下性能提升 3倍。

数据湖分析(Data Lake Analytics)“一键建仓”正式上线

Data Lake Analytics“一键建仓”方案正式上线,支持按日自动帮用户将RDS数据库(MySQL、PostgreSQL、SQL Server)和ECS自建数据库(MySQL、PostgreSQL、SQL Server、Oracle等)的数据同步到Data Lake Analytics,并自动生成对应Schema(映射源数据库中的表结构),消除了用户关于“直接分析生产数据库实例中的数据会影响线上业务”的顾虑,可以基于Data Lake Analytics上的数据进行更灵活自由的数据处理。

RDS & NoSQL & 管控工具

RDS 开放5年售卖

RDS包年包月支持五年期售卖,数据库引擎包含MySQL、SQL Server、PPAS、PostgreSQL、MariaDB,目前三年期、四年期、五年期售卖统一5折优惠,个别渠道开放更高优惠。

RDS 全域开放ESSD售卖

RDS 实现在所有地域开放ESSD存储,用户可直接在购买页选择ESSD云盘实例,目前MySQL 5.7&8.0 高可用版支持ESSD云盘,SQL Server 2012及以上版本支持 ESSD云盘。

RDS MySQL支持最大16TB空间

RDS MySQL支持最大16TB存储空间,主要涵盖版本是 5.7 & 8.0 高可用版 ESSD云盘版实例。ESSD云盘版大空间在第一次快照备份时会占用比较大的时间,但后期的增量备份时间将会达到秒级,大大优化了客户实例备份恢复的效率。

RDS MySQL和MariaDB 专有网络实例支持修改端口

RDS MySQL 和 MariaDB 专有网络实例支持修改端口,用户可以在数据库连接中修改网络端口,包括内网地址和外网地址。至本功能发布,RDS MySQL 和 MariaDB 支持用户在所有场景下修改数据库连接端口,满足客户不同端口的定制需求,大大优化体验。

RDS SQL Server 支持单机版升级到双机版

RDS SQL Server 支持单机基础版实例升级到双机高可用版,涵盖版本中国站包括2012&2016 企业单机版、2012&2016 WEB单机版,国际站还包括2012&2016标准单机版。

RDS SQL Server 高可用版实例提供了更强的可靠性,支持秒级故障切换、CDC数据抓取、链接服务器、分布式事务、TDE加密等高级特性,为企业级用户提供更强更安全的数据库服务。升级过程中,最多会有20分钟业务不可用,因此要求业务系统必须具备重连机制,并且用户可选择在可维护时间段或者指定时间点切换,以降低对业务的影响。

RDS SQL Server 支持更多版本单机基础版实例

RDS SQL Server支持更多版本的单机基础版本实例,其中中国站支持2016企业单机版实例,并且提供了极高性价比的通用型实例。国际站同时支持2012&2016 标准单机版实例、2016企业单机版实例。

单机版实例相对高可用版本实例,价格大幅降低,但可用性没有高可用版高,一般情况约在30分钟时间内完成故障转移。

RDS SQL Server 2008r2 发布补充协议

RDS SQL Server 针对2008r2版本发布补充协议,协议内容主要是增加针对微软自2019年7月9号后不再支持SQL Server 2008r2安全更新的规定方案,允许用户继续购买2008r2实例,但是用户需要自行购买微软提供的付费安全更新包,然后通过工单形式提供给阿里云安装补丁。其余场景,针对SQL Server内核问题,用户需要在控制台通过“升级版本”一键升级到2016版本解决,阿里云不独立提供2008r2的内核更新服务。

数据迁移DTS支持PolarDB数据同步及订阅

DTS支持POLARDB至POLARDB/ADB/KAFKA/RDS等数据源的数据实时同步,满足POLARDB迁移回滚、异地灾备及基于ADB建设数据实时仓库的用户诉求。同时,DTS支持PolarDB Binlog实时订阅,通过这个功能,用户可以实时订阅并消费Binlog日志。

数据管理DMS企业在聚石塔正式售卖,同时在呼和浩特开服

数据管理DMS企业版在聚石塔正式售卖,同时在呼和浩特开服。通过DMS企业版,用户有效保障数据库的访问数据安全及数据库变更稳定性。

混合云数据库管理 HDM 支持监控指标的异常发现和预测,支持PostgreSQL的运维管理

混合云数据库管理 HDM支持监控指标异常发现和预测,通过机器学习和智能算法,支持数据库实例核心指标的异常检测和预测,并自动联动一键诊断模块,帮助用户快速定位根因。同时HDM支持自建PostgreSQL的统一监控、告警、性能诊断和优化。

数据库备份DBS支持RDS MySQL异地备份

数据库备份DBS发布RDS For MySQL的备份异地转储功能,支持备份异地转储功能且备份集最长可保留5年。通过备份异地转储能力,有效满足企业客户的安全合规需求。

数据库网关DG正式公测上线

数据库网关DG正式公测上线,数据库网关支持线下/其他云厂商私有网络数据库的连接访问。出于安全考虑,很多用户的数据库都只开放内网访问地址。用户为使用阿里云上的生态工具,需要通过专线或VPN网关设备接入阿里云,使用成本极高。借助数据库网关,用户只需在本地安装软网关,即可低成本得使用生态工具完成私有网络数据库的访问管理。

https://www.aliyun.com/product/dg

三、开发者生态:

数据库分库分表Sharding中间件专场(7.27@杭州)

本次沙龙以“稳定可靠、极致扩展,解密 Sharding on MySQL业内最新发展动态”为主题,为Sharding on MySQL以及DRDS起到有效的推广作用,现场干货分享极大的影响改变了参与者对于该技术栈已有的认知。现场开发者积极踊跃,提问多偏向于技术原理及功能使用层面。

数据库产品事业部月刊(2019年7月)
https://yq.aliyun.com/articles/707309

四、客户案例:

客户案例:AnalyticDB for MySQL助力互金客户资产360实现高效的资产管理服务

资产360是新一代互联网金融资产管理公司,以AnalyticDB for MySQL 3.0为核心的资产管理分析平台,为上千家客户提供了全流程的高效的资产管理服务,实现标准化精准处理。相比客户之前使用的TiDB,在体验、兼容性和性价比上得到了客户的极大肯定。

客户案例:农业空间信息系统迁云

方案架构

数据库产品事业部月刊(2019年7月)

方案演化过程:

1.二月份接触了解到线下机房即将到期,可能考虑迁云。客户线下业务是做农业空间信息化,重点依赖PostGIS与MongoDB,其中对于GIS(地理信息引擎)的依赖最大。

2.咨询云上PostgreSQL的性能与兼容性,重点是GIS的适配性问题,非常担心上云后数据库出现问题,而阿里云PostgreSQL兼容PG社区原生GIS,同时自研的Ganos也100%兼容PostGIS,且更加强大易用,支持多模型处理能力,支持GPU计算加速,同时云上RDS本身具有高可靠、可扩展、高安全的特性,对于快速增长的业务来说非常合适,客户比较感兴趣,期间不断咨询GIS细节问题,PD均给与专业解答。

3.RDS问题确认后,进入云上整体架构方案讨论阶段,客户预计采购ECS+PG+MongoDB,经与客户电话会议沟通,改造架构方案,在注册网关集群上采用负载均衡架构达到高可用,数据库均采用云化数据库,在网络规划方面,建议使用多个EIP+共享带宽的模式,一来节省成本,二来方便管理,同时客户线下有外部请求代理机,建议云上使用NAT网关设置SNAT实现,云MongoDB使用三节点副本集提高可用性。

4.本地物理机将来会做备份用,使用阿里云VPN网关与本地网络打通,云上云下要注意使用不同的网段,生产数据库PG和MongoDB均使用DTS上云,并且上云后继续使用DTS做增量同步备份到线下。

5.业务安全方面,客户本地使用的启明星辰防火墙,云上建议采用waf+云安全中心+云防火墙,但客户没有此方面预算,于是强烈建议云安全中心必须要做,最终采纳建议,采购三年云产品,共计68万。

客户价值:

1.充分了解客户的业务场景,抓住客户痛点,合理匹配云上产品打动客户,调动强大的支撑团队解决客户细节问题,排除上云顾虑。

2.经典的混合云架构,IDC迁云客户除了云端规划,也要为客户考虑线下机器的充分利用,包括在网段、路由和交换机规划上,都要做在采购前,避免采购后采坑。

客户案例:物流企业等保上云

客户背景:

湖北省本地知名仓储物流企业,从事货物运输,货远代理业务。

客户痛点:

  • 历史数据多、数据量大,多存放于本地电脑,导致稳定性差、可扩展性低,处理数据、响应请求慢,大幅度降低员工的工作效率,影响业务生产。
  • 数据安全要求较高,本地机房安全投入成本高,效益却很低,且不可控,一旦出现安全事故,影响将不可预估,应急方案也无法快速响应。
  • 以前本地服务服务器出过问题,有数据丢失情况。

解决方案:

  • 首次和客户接触,了解到业务系统相对单一,系统主要是内部员工使用,对业务稳定性要求较高且针对安全要求非常高。业务端使用多台服务器做负载,后端数据存放到RDS进行数据分离,建立高可用架构。客户现在线下使用的是MySQL5.7,考虑兼容问题推荐客户云上也采用RDS For MySQL5.7,开通主备来进行数据备份,同时运用DBS进行数据传输和数据互通。
  • 因是公司内部几十号人使用,对连接数和IOPS要求不高,但对存储空间要求较大,结合客户现有数据迁移上云和未来5年内可正常使用,建议客户选择到该规格所能购买的空间,未来如果对外提供服务,可再升级或增加只读节点,无缝升级保障业务不中断的同时,也保障数据的安全性。
  • 在安全方面按照三级合规要求搭建安全架构,web层架构ssl证书、waf防火墙来保护用户正常的访问,过滤恶意访问流量给第一个出入窗口加上一道安全防护门,由于数据安全性要高且要满足合规要求,给客户配备了数据审计+云安全中心+堡垒机三大安全配件,来进一步保障数据的安全性,同时便捷运维管理人员的工作。
  • 业务端建议客户使用EIP+ECS的方式进行绑定,增加系统安全性和灵活性。
  • 在购买时长上,最开始只准备购买一年,结合3年5折的优惠,推荐购买3年可享受三年半价优惠,但因公司财务章程限制,MySQL最后购买了两年。
  • EIP增加维护灵活性,按业务维护需要可随时绑定或解绑公网IP
  • MySQL 5.7 性能稳定、使用方便,CloudDBA对资源利用、慢SQL情况一目了然,减小客户使用成本。
  • 安全的架构既满足合规要求又保驾业务稳定开展。
  • 购买时间越长,客户享受的折扣越高,减小客户上云成本。