存储 频道

洞窥大数据 DTCC 2015存储专场先睹为快

  【IT168 专稿】作为国内数据库与大数据领域最大规模的技术盛宴,2015第六届中国数据库技术大会(DTCC)即将于4月16日-18日在北京新云南皇冠假日酒店闪亮登场。大会以“大数据技术交流和价值发现”为主题,云集了国内外顶尖专家,共同探讨MySQL、NoSQL、Oracle、缓存技术、闪存技术、国产数据库、Hadoop、数据挖掘、推荐系统、机器学习等领域的前瞻性热点技术。

2015 DTCC即将起航 存储专场先睹为快

  为期3天的DTCC 2015大会届时将吸引2500多名IT人士参会,举办21个专场、120多场精彩演讲,致力于为数据库人群、大数据从业人员、广大互联网人士提供最具价值的交流平台。数据库领域的"拉斯维加斯"之夜,面向全国范围技术大师们的技术盛宴即将拉开帷幕!

  这是一个数据爆发的时代,更是一个数据技术爆发的时代。归根结底,数据是我们未来新经济的基础。最新消息,本次大会将特设“存储与文件系统”专场演讲,嘉宾已全部确认完毕,嘉宾议题也已发布【详细日程】。该专场上会有哪些精彩内容?在这里,小编独家整理了四大亮点,让大家先睹为快:

  亮点1:双十一背后的隐形之剑

洞窥大数据 DTCC 2015存储专场先睹为快

  京东商城云平台系统技术部高级架构师 桂创华

  演讲主题:《京东文件系统:从2013到2015》

  拥有一亿用户、营业规模达数百亿元的大型网络零售企业京东(JD.com),在网络零售市场深耕近十年之后,也正式迈入了PB级数据管理的新时代。对企业而言,PB级(1PB=1024TB)的数据管理算得上是衡量其数据规模和管理能力的一个重要标尺。目前,全球PB级数据管理俱乐部已经拥有Facebook、淘宝等重要成员,能够跻身其中对京东而言是荣誉,也意味着挑战。

  即使是非促销日,京东的订单数字也能达到数亿,几十亿商品图片及其缩略图的存储给京东带来了极大的挑战。这些文件基本上都是KB 级别的,但传统的关系型数据库并不擅长处理海量小文件,而且价格昂贵,没法按需扩容,只能定期删除数据。开源存储系统虽然便宜,但难以选型、定制和维护。此前,京东一直是采用HDFS作为数据存储子系统,但是专为大文件而设计的HDFS显然无法有效处理大量小文件,同时还对Hadoop的扩展性和性能造成了不良影响。

  针对电商业务中海量小文件、大文件等数据分布式存储与管理的实际需求,京东从2013年7月便开始着手自主研发分布式文件系统JFS(即Jingdong Filesystem),以及分布式的缓存与高速键值存储服务Jimdb,目前已经取得了阶段性的成果。

  演讲内容预告:

  届时,京东商城云平台系统技术部高级架构师——桂创华将出席“存储与文件系统”专场,与大家分享介绍京东的技术团队是如何研发逐步完善其自主研发的分布式文件系统JFS (Jingdong File system)。桂创华曾先后参与京东海量小文件、对象存储、新图片系统的研发,主导了京东弹性块存储,JFS元数据表结构存储的设计和研发。

  据悉,JFS根据业务需要,已经陆续实现了海量小文件、对象存储、块存储、新图片系统等功能,元数据的结构化存储以及与Hadoop的集成正处在研发阶段。同时,还在分布式存储方面满足了精确故障检测、自动故障切换、两级存储层次、在线纵向扩展以及在线横向扩容等需求,具有很强的指导性。

  亮点2:闪存与文件系统之间的“危险关系”

闪存与文件系统之间的“危险关系”

  Greenliant绿芯半导体系统科技(上海)有限公司,业务发展副总裁 李炫辉

  演讲主题: 《闪存存储特性以及文件系统应用》

  兰博基尼跑车和苹果iPod想必大家都耳熟能详,但豪车车载娱乐系统和iPod存储空间背后的芯片厂商就鲜少有人知道了。Greenliant——这家名不见经传的存储芯片提供商其实在闪存领域早已耕耘多年。其前身是全球最大的闪存供应商SST,从2005年起,仅向iPod MP3所提供的NAND闪存控制器便高达2700万套。作为一家飞速成长的存储新贵,拥有超过20年固态存储及半导体研发经验无疑是Greenliant公司的一大优势。

  计算机上通行的大部份文件系统,都是针对碟盘存储设备设计的,应用到闪存上并不适合。一般的文件系统,可以通过闪存转换层(Flash Translation Layer,FTL)写入闪存,但是它的缺点是写入的效率较差。因此,设计闪存文件系统仍然是有必要的。

  闪存文件系统(英语:Flash file system),是一种为了在闪存设备上存储数据而设计的文件系统,如JFFS2与YAFFS等。随着移动设备的日渐增加,闪存的存储能力增加以及价格下降,这类型的文件系统已变得越来越普遍。

  设计闪存文件系统的基本概念是,当存储数据需要更新时,文件系统将会把新的复本写入一个新的闪存区块,将文件指针重新指向,并在闲置时期将原有的区块删除。例如JFFS2与YAFFS,都是这样设计。

  演讲内容预告:

  在本次大会上,Greenliant业务发展副总裁李炫辉将主要向大家介绍,闪存存储的特性与传统磁盘的差异,闪存存储的性能优势和持久性劣势以及解决机制。另外,还将剖析当前文件系统设计与闪存结合时存在的问题,同时对闪存在不同的文件系统中的应用模式和特点进行初步分析。

  亮点3:论云硬盘如何实现数据库高可用

闪存与文件系统之间的“危险关系”

  网易杭州研究院高级开发工程师 吴东

  演讲主题: 《网易云硬盘系统介绍及实战》

  演讲内容预告:

  存储、传输、处理是计算机系统的三大主题,存储作为其中的基石,其重要性不言而喻。传统的企业级存储对于互联网应用来说,其扩展性、成本都是一个痛点。随着云计算技术的发展,虚拟化的普及,在虚拟化的基础上使用块存储服务已经是大势所趋。

  网易云硬盘是在传统块存储技术的基础上,基于廉价设备构建可扩展、高可靠、高可用、有QOS保证、易运维的存储系统。公司的数据库云服务(RDS)及云搜索(NCS)都建构在云硬盘之上。

  本身就是IT技术爱好者的吴东,现从事网易分布式块存储服务的开发与维护工作,专注于底层存储系统与分布式系统技术。在大会第三天(4月18日),吴东将带领大家深入了解网易云硬盘这款产品,并就如何依赖云硬盘实现数据库高可用高可靠等技术主题展开讨论,敬请期待!

  亮点4: 浅析ceph数据一致性机制

闪存与文件系统之间的“危险关系”

  红树林信息技术有限公司联合创始人兼CTO 滕召智

  演讲主题: 《ceph数据一致性机制浅析》

  演讲内容预告:

  滕召智曾负责桌面Linux发行版及家用设备Linux应用、VOIP及服务器系统产品,Ubuntu Builder/PMP的主要开发,给多家游戏、互联网、移动应用企业兼任技术顾问或架构师。曾参与Linux标准工作组标准制定工作,目前多活跃 于北京、上海等地开源社区,是苏州自由软件用户组发起人之一,息壤开源、trystack.cn等社区的参与者。

  他的演讲内容将集中于下面四个方面:

  1.需求背景:云端存储对数据一致性的需求

  2.CRUSH算法与一致性Hash:对两种算法进行简单介绍,以及其优劣势

  3.Ceph如何应对常见故障,scrub机制:对故障的监测和恢复的原理

  4.Ceph与Openstack结合时对一致性的注意事项:分享在这个过程中,对一致性的关注点以及操作技巧

  闪存与文件系统之间的“危险关系”

  ▲一切尽在2015第六届中国数据库技术大会!

  注:以上表格为拟定日程,最终请以官网当天议程为准。DTCC2015精彩仍在继续,详情请查看大会官网: http://dtcc.it168.com,大会门票火热发售中,现阶段报名可享受8.8折优惠!

4
相关文章