eygle.com   eygle.com
eygle.com eygle
eygle.com  
 

November 26, 2014

2014 Oracle嘉年华:分布式存储解决方案

在Oracle数据库领域,近年的优化工作主要围绕着存储系统展开和深入,由存储而闪存,由外存而内存,内圣而外王。而在业界,随着Exadata在一体化、闪存应用上的成熟,基于闪存的解决方案开始落地开花纷纷展现出来。

在Oracle的Exadata体系中,通过PC服务器构建的分布式存储是整体架构的核心,正因为分布式PC的引入,Oracle在本地服务器插接的Flash卡成为了加速IO的利器。

Oracle数据库从"I时代(8i/9i)"、"G时代(10g/11g)",再到"C时代(12c)",一直致力于用低廉的分布式硬件解决用户的核心数据存储和计算问题。如果要谈"去IE",Oracle在这个方向上比任何一家厂商都要走得早、走得远。

在吴承杨(甲骨文公司副总裁及大中华区技术产品事业部总经理)的演讲中,他着重提到了Oracle数据库产品发展经历的四个时代,现在Oracle数据库全面转向支持大数据、云时代,其Cloud的概念也被坚定的落实到产品策略中,这是在2014年Oracle发出的最坚定的声音。

而在Oracle数据库的未来,整合支持大数据(Oracle Big SQL)、一体化系统(Exadata)、云计算(DBaaS)平台,将会成为更加让人瞩目的全新的整体战略。

随着Oracle ASM技术的成熟,以及Exadata所获得的巨大成功,软件定义存储的概念也开始随之在数据库系统中落地。

在本次Oracle技术嘉年华大会上,云和恩墨推出的开放的分布式存储解决方案中,通过软件定义存储的中间层,可以同样将底层的PC服务器统一起来,加上以Flash-闪存作为存储,用用户提供高速的IO处理能力,对于面临存储压力的用户,可以提供廉价、高性能的整体解决方案。

在云和恩墨命名为 - zData 的分布式解决方案中,可以在可控的成本范围内,为用户提供数十万的IOPS处理能力,在使用Infiniband和40Gb网络下,吞吐量也可以获得巨大提升,在国内企业在去"IE"方向上,分布式存储解决方案将成为用户可以考量的前瞻性技术路线之一。

在希捷技术专家赵玉强分享的成功案例中,10张Nytro卡为用户带来了31万的IOPS和4.8GB/s的吞吐量,并将主要业务流程的响应时间提升了一倍以上。在Oracle RAC的环境中,Flash的应用越来越成熟。

值得一提的是,除了Seagate(希捷)在大会上展示闪存卡之外,国内新兴的闪存厂商也成为了此次大会的赞助商,这其中包括MemBlaze(忆恒创源)和Shannon(宝存科技),相信在国内外厂商的大力推动之下,闪存技术的应用也将日益成熟和广泛。

Posted by eygle at 8:44 AM | Permalink | Activity (120)

November 25, 2014

2014 Oracle嘉年华:SQL审核的源头管控

在刚刚结束的Oracle技术嘉年华大会上,"SQL审核"这个概念被屡次提及,成为一个重要的核心关键词。云和恩墨的技术专家罗海雄和去哪儿网的技术专家王竹峰分别做了相关的主题分享。

SQL审核的提出,是基于数据库的性能优化实践和屡见不鲜的"抢险救灾",经过总结大家发现,80%的数据库性能问题来自SQL,而事后的SQL优化和救火已经不能满足今天业务快速发展和高可用连续性的需求。

SQL审核是指,将数据库线上系统的SQL优化和问题诊断,推进到产品开发测试阶段(上线前),通过前期的SQL审核管控,将80%的SQL问题消灭在萌生阶段;而对于线上运行系统,可以通过同样的SQL审核过程,发现和解决潜在的性能问题,做到提前预防,防患于未然。

在互联网企业,SQL审核是一直在进行的工作,基于这样的工作,DBA在大量前置,逐渐和开发进行融合。

去哪儿网的MySQL技术专家王竹峰就展示了他们对于SQL审核理解,传统的人肉审核方法即繁重又容易出现误判,所以这项工作必须要智能化和产品化。

在云和恩墨的技术专家罗海雄的主题中,不约而同的阐述了SQL审核的重要意义。

在今天互联网化的开发现状之下,快速更新迭代、产品周期缩短,这些都可能带来不稳定的因素。

本次大会上,两个产品和解决方案出现在大家的视野中。

罗海雄展示了云和恩墨基于Oracle数据库的SQL审核产品工具 - z3 。这个产品可以通过内置的算法引擎,可定制的抓取数据库中执行的SQL及其详细数据,通过过滤分析,进行量化的积分趋势展现,并将SQL问题高亮显示,指导程序员的优化分析,并可以通过内置的工作流由DBA进行优化,变更管理同时被内置;

去哪儿网的产品名称是Inception,Inception是一个命令行工具,通过脚本提交审核,可以通过一系列的检测(包括语法、语义、规则检测等)来推出反馈,其目标同样是控制SQL中可能存在的种种低效或误区:

以下是Inception的输出结果,输出的内容整理如下:

云和恩墨的z3产品,具备更完善的图形和客户端展现,下图显示了工作对于SQL审核项的问题探索,高亮显示,以及工作流程设置,通过构建SQL集合,可以提交DBA进行集中审核,完成工作流转。

通过会后的听众热议和交流,我们看到,提前预防性的运维和管理已经引起了大家的广泛重视,而工欲善其事,必先利其器,通过好的工具提升工作效率是大家的共同关注所在。

Posted by eygle at 9:11 AM | Permalink | Activity (120)

November 24, 2014

2014 Oracle技术嘉年华:邮储银行展示开放架构

在刚刚结束的Oracle技术嘉年华大会上,邮储银行信息科技部副总经理张兰英和云和恩墨技术总监杨廷琨发表了联合主题演讲,介绍了邮储银行大集中项目应对的挑战及启示。

邮储银行是国内几大银行中,唯一一家使用小型机+Oracle数据库支持核心金融交易的银行。

所以新闻中提及:工业与信息化部副部长杨学山表示,邮储银行选择以小型机集群替代大型机构建核心系统的技术路线,并取得圆满成功,是该技术在国内同业的首次成功尝试,且在开放式平台上建设如此庞大规模的业务核心系统,在全球尚无成功案例。

邮储银行在2014年10月26日完成了全国系统数据库最后的整合集中,系统共覆盖了超过12亿的个人用户,其系统是极其庞大和复杂的。系统按照业务进行了分库,最终实现了全国分散数据库的整合与集中。

据公开数据显示:"邮政储蓄逻辑集中系统"成功上线后,支持中国邮政储蓄银行全国3.9万个网点运行,能够管理超5亿的客户数量和超过12亿帐户数量,日交易峰值处理能力预计达到1.8亿笔。这将是全世界建立在开放式平台上的数据量最大﹑处理量最大的银行核心业务系统。

在数据库领域,分久必合,合久必分,分分合合是不变的主题,近年来,很多企业开始走向数据库、数据中心的整合,通过整合降低软硬件成本,提升运维和数据运营能力,云和恩墨今年也参与或帮助大量用户完成了数据整合项目,包括中海油、中国人寿、福建农商行、英大财险、欧尚超市等,在邮储银行的数据整合项目中,云和恩墨也分别在架构设计阶段和整合优化阶段深度参与其中,贡献了自己的力量与智慧。

在数据整合的过程中,合理规划容量,合理配置资源非常重要,杨廷琨分享了云和恩墨在项目中的数据量化方法和整合推演过程,通过容量规划在最初为系统构建提供了有力的数据支持。

在主题演讲中,张兰英 还特别介绍到双11邮储银行承载的业务情况,当日交易量达到近亿笔,远远超越了平时的业务峰值,整体系统运行平稳,整合集中后的系统经受住了高峰的挑战和考验。

其实大家都知道,在Oracle数据库中,大量的并发事务可能导致LGWR在写出日志时遭遇瓶颈,Log File Sync和Log File Parallel Write经常会成为核心的瓶颈点,在这种情况下,良好的架构设计和开发环节的极致SQL质量管控就成为了关键。

在邮储系统中,业务的分割和系统整合的平衡点至为关键,最后系统的成功集中与上线与这些工作密不可分。

下图展示了测试环节中出现的显著日志处理瓶颈,相信很多DBA们对此并不陌生。

在邮储银行的逻辑集中路线图上,我们可以看到,项目早在2011年就已经启动,至2014年10月完成,长达三年四个月的演进过程也充分说明了邮储银行在变革中的慎重与谨慎,事关金融、金钱,任何一个技术变革都不是轻易的,这其中大量的IT专家和企业为之奋斗、为之不眠。

张兰英还揭秘了项目前期经历的艰苦过程:"经过6个月,6个场景、32轮测试,最终测试结果TPS 1.2万笔/秒,每日可处理交易量1.748亿笔业务,测试结果验证了使用小型机集群建设超大规模的银行核心业务系统的可行性。"

另据媒体报道:从2013年3月9日至5月14日,共开展了7轮切换预演,参与切换预演人员数量最多时近1万人

我们可以想见,近万人的演练规模,其重视程度与规模恐怕也是空前的。

杨廷琨在主题演讲中还介绍到,云和恩墨根据在项目中积累的经验,形成了在U2L项目中的整套科学方法和评估体系,能够完善的进行资源推演和评估工作,为用户的整合迁移提供决策支持。

邮储银行在从大型机向小型机迈出的一步,在金融领域是一次极大的革新,在经过持续运行的考验之后,邮储银行将能够在架构上进行更多的尝试和创新,在互联网企业大力倡导去"IOE"的时代,金融企业充分考虑自身情况,稳健的进行IT架构演进,是非常值得关注与肯定的。

在本次大会中,还邀请到了南天电子信息产业股份有限公司总架构师戴敏,戴总表示此次邮储银行核心业务系统应用软件架构融合了分布式并行处理架构,这是在银行核心业务处理中首次实践。

新闻中引用的另外一段文字可供对比参考:

"去小型机"化的代价很大,阿里巴巴技术保障部DBA 负责人周宝方表示:"去IOE"拥有很高的技术门槛,阿里巴巴集团从2010年开始"去IOE",整个运动耗时3年,经过 1.7万名内部技术人员的努力方才完成,而且之后的维护成本也不低。

从阿里巴巴到邮储银行,各自都通过3年多的时间完成一次技术架构转变,这说明一项技术革命并不是轻而易举的,谋定而后动,深谋而远虑,是大型企业在动作之前必须具备的先决条件。

Posted by eygle at 2:08 PM | Permalink | Activity (120)

November 17, 2014

2014 - 第四届Oracle技术嘉年华大会成功举行

2014年11月14日~15日,是Oracle技术嘉年华大会的活动日,在这两天中,来自全球的Oracle技术专家济济一堂,再次在北京分享Oracle技术的最前沿信息,这已经是ACOUG主办的第四届Oracle嘉年华大会,也正式命名为:Oracle Technology Carnival。

大会首日,早上9点,在主持人的宣布下,大会正式拉开帷幕,现场有大约1,500人以上的用户、爱好者和技术专家齐集一堂。来自云和恩墨的美女主持靓丽登场,完美的主持了大会首日主会场的Keynote演讲。

IMG_5734.jpg

大会开场,甲骨文中国市场部总经理迟晨浩先生和ACOUG联合创始人张乐奕先生共同发表了开场演讲,阐述了用户组对于社区的服务、贡献,以及作为用户和厂商之间的纽带关系所发挥的巨大作用。ACOUG作为Oracle全球用户组的重要成员和组成部分,正在发挥越来越重要的作用。

IMG_5744.jpg

IOUG 国际用户组的主席也发来了祝贺,ACOUG近几年和国际用户组织进行了广泛深入的合作尝试,包括演讲、出版、会议等等,希望通过用户组织,真正的Oracle技术圈子能够更加融合、相知。

IMG_5747.jpg

授人玫瑰,手留余香。正如 ACOUG 主席 张乐奕 在演讲最后阐述的,我们一直致力于通过不断的技术分享,将我们的知识与经验传递出去,帮助别人也帮助自己,行路虽远,初心未改。

IMG_5755.jpg

Sally Piao女士,作为来自Oracle美国总部研发团队,是Oracle的全球副总裁,她已经在Oracle公司工作超过20年,在她的主题演讲中,将Oracle 2014年的产品战略展示出来,Cloud已经成为Oracle全公司的核心战略,从IaaS、PaaS、SaaS层面,甲骨文公司已经能够提供全面的产品和服务,这一转向是坚定而快速的,而在数据库层面,Oracle已经不满足与一体机的优化,未来Software In Silicon,优化渐入更核心的芯片层。

IMG_5759.jpg

在第二个主题演讲中,我和大家分享了"云时代Oracle的技术创新与革命"的主题,从数据库领域的发展趋势和大家分享了我的观点。国内企业在经历了漫长粗放式的IT建设之后,现在走进了整合集中已经云化部署的时代,而在去"IE"的浪潮下,以PC服务器和分布式存储为核心的演进方向正在成为主流,在这个方向上,实际上Exadata一直是引领者和创新者,早在2008年推出的Exadata就是去"IE"的分布式存储架构。而云和恩墨的zData解决方案也是在去"IE"的方向上,架构领先、成本低廉的解决方案之一。在面对大多数性能问题时,我们发现SQL通常都是核心的症结所在,云和恩墨在SQL审核服务上,将优化前置,防患于未然,更进一步。z3 - SQL审核工具是这一理念的承载。

IMG_5767.jpg

吴承杨,熟悉的人亲切的称呼他为Peter,他说甲骨文公司副总裁及大中华区技术产品事业部总经理,作为Oracle在国内的领军者之一,他介绍了Oracle在国内的发展和技术方案演讲过程。他风趣的提到,Oracle的发展可以用一个词来概括:上天入地。上天指云计算,Oracle将全面在公有云、私有云、混合云上为用户提供解决方案;入地指Silicon,Oracle极至的优化将推进到芯片层,实现真正的"端到端"(不能深入更多了)。

IMG_5800.jpg

TOM大神作为很多DBA的领路人,在今年和我们分享了两个主题,继续展示了他在SQL方面无以伦比的深入功力,他所展示的Oracle新的特性,往往最终都成为了大家应用最为广泛和深入的特性,TOM在Oracle的传道授业方面,是我们的导师。

IMG_5823.jpg

本次大会的另外一大特色是,邀请了多位重量级行业客户来分享各自的领域应用和解决方案,中国邮政储蓄银行信息科技部副总经理张兰英,联通集团信息化和电子商务部副总经理耿向东 为我们在Keynote环节分享了重要主题,展示了客户在应用数据库技术构建核心应用中的演进方向。

邮储银行作为国内大行中,唯一一家使用Oracle数据库支持核心交易系统的银行,正在将全国的系统整合集中到中央平台上,数据库的整合也带来了一系列技术变革。

IMG_5811.jpg

这次大会的成功举办还离不开大批志愿者的帮助和努力,感谢所有为嘉年华大会付出努力的朋友们,感谢你们。

acougall.jpg

ACOUG继续努力。

Posted by eygle at 9:27 AM | Permalink | Activity (120)

September 19, 2014

Larry Ellison卸任Oracle公司CEO 一个时代的终结

在Oracle官方的网站上,前几天我曾经注意到Larry的简介,只有简短的一行:Larry Ellison has been CEO of Oracle Corporation since he founded the company in 1977. He also races sailboats, flies planes, and plays tennis and guitar.

当时就心存异样,想,这个老Larry不是想做什么吧?想不到这里的has been就是一个暗示。

2014OOWLarryBio.png

果然,今天看到新闻,Larry宣布卸任Oracle公司的CEO,虽然他还担任董事会主席和CTO两个角色,但是毫无疑问,他将渐渐淡出公司的常规事务,并更加远离我们的视线。

毫无疑问,Larry Ellison就是一个传奇,他是Oracle公司的灵魂和象征,再不能有一个人能够拥有同样的号召力和影响力。去年的OOW大会,当所有人挤在一个大会厅中等Larry的演讲,可是听到他跑去看帆船赛,更换了主题演讲人,瞬间大厅走空了一半。

在1986年3月,有三家公司IPO,分别是4日SUN,12日Oracle,13日微软,现在三家经历了辉煌的公司,他们的创始人都以不同的方式开始离开。

Oracle,Larry,自从1977以来,37年。

传奇和英雄都将老去,可是Oracle里有他永远的印记。

Posted by eygle at 4:23 PM | Permalink | OraNews (236)

近期发表

  • Oracle 11g 的官方支持周期和时限 - August 15, 2014
  • Oracle 12c新特性:IN-Memory Option - 列存与压缩 - July 23, 2014
  • Oracle 12c新特性:IN-Memory Option - 缓存与参数 - July 23, 2014
  • 贺 恩墨学院OCM认证100人100%一次性取得认证 - July 18, 2014
  • Oracle 2013年数据库市场份额47.4 - 再居第一 - July 17, 2014
  • 去"I":四川电信Oracle数据库迁移到虚拟化平台 - June 17, 2014
  • ACOUG校园行 - 南阳理工学院技术分享 - May 11, 2014
  • 清华大学软件学院 - 技术交流与分享记 - April 18, 2014
  • DTCC 2014 - 数据库技术大会五年 - April 12, 2014
  • 【媒体】LSI 有新招:卖闪存拉上Oracle ACE - January 10, 2014


  • CopyRight © 2004 ~ 2012 eygle.com, All rights reserved.