WatchStor.com — 领先的中文存储网络媒体 | 51CTO旗下网站

新闻资讯 > 存储资源管理 > 正文

51CTO存储专家:新技术 看上去很美

51CTO.com  董唯元丨2006-09-06 09:59 标签:存储资源管理 

51CTO.com独家特稿经过近乎爆炸性的发展,今天的存储技术无论从架构理念还是技术实现,与几年前相比都大为丰富。然而,与其他“初步繁荣”的领域一样,在花样繁多的理念背后,其实也隐藏着一些不够成熟完善的技术手段。只不过这些不足和缺憾从来不会出现在天花乱坠的“方案建议书”中,只有当用户真正使用之后才会有所体会。

螃蟹不可以生吃

曾有某个大型铁路部门,在系统改扩建时拟对核心业务实现容灾,而恰逢某知名厂商隆重推出首款支持远程数据镜像的中端存储产品。于是两者一拍即合,国内首个基于中端存储设备的实时容灾就此诞生。

在确定方案框架后,用户还曾经谨慎的测试了该存储设备在模拟应用中的性能表现,并依此最终确定了产品配置指标。但是工程进入实施阶段之后,意料之外的问题还是出现了。

首先是数据镜像过程消耗了太多的设备处理能力,而控制器又无法进一步扩展,造成用户应用得到的性能只有测试时的三分之一。然后是镜像机制不完整,该设备不支持异步镜像,因此对远程链路的质量和效率要求非常之高,以至于维护通讯链路的成本大幅度增加,基本抵消了用中端产品替换高端产品所节约的投资。最终的结果可想而知——用户虽然在总体投入上稍微有所节省,但得到的系统性能却大打折扣。

更令用户顿足捶胸的是,仅数月之后,市场上就涌现出一批设计更合理、技术更完善、价格也更低廉的容灾产品。这个刚刚上马还处在试运行阶段的产品立时成了“过时设备”,被无奈的列入到整改清单中。

合理而巧妙的利用新技术诚然是获得最优性价比的重要手段,但上面这个真实的事例告诉我们,尝试新技术的同时也必然会伴随风险。作为直接承担风险责任的最终用户,即便有勇气做第一个吃螃蟹的人,也应该尽量设法搞清楚“螃蟹”的成熟度,尤其是针对存储系统。

孔雀开屏的后面

作为全系统的核心基础,存储系统对整体架构的影响可谓“牵一发而动全身”,因此对存储系统的建设一定要全面考量不可偏颇。

当年虚拟存储方兴未艾的时候,某专业虚拟存储厂商曾经兴致勃勃的召开技术演示会,向若干金融电信业的IT负责人推荐。大屏幕上“带内虚拟”、“带外虚拟”、“自动资源分配”、“透明扩展”、“透明迁移”等诸多概念绚丽起舞,台下却有几位老先生眉头紧蹙。

会议行将结束的时候,一些颇有经验的用户终于发问了。

“我理解,这虚拟存储其实就是把我们现有的存储设备都统一由你的设备来管理,然后主机再统一使用由你的设备提供的资源。对吗?”

“正是。这样您可以……”

“这样你的设备岂不是个很大的单一故障点?我为什么要把所有数据都集中到这个相对脆弱的设备上?”

“我们的设备提供有热备容错功能,而且‘把所有鸡蛋放在一个篮子里’也更方便管理和使用。”

“为了保障系统稳定和安全,我们在前端主机和后端存储设备上的投资非常大,现有你的虚拟存储仅是价值十几万的设备,却嵌入在整个系统的中心,这有点不合适吧?我承认虚拟存储的各种好处,但是相对我系统中现有的‘鸡蛋’,你提供的这个‘篮子’似乎脆弱了点。”

虚拟存储技术本身的是非对错自有公论,但这些用户能够不被新技术华丽的外表迷惑,敏锐的看到潜在问题,这种实事求是的态度确实值得学习。

梨子的滋味需要尝

大型系统中,各种软硬件配合关系繁多,安装调试工作也很复杂。虽然很多设备和软件厂商都会尽量提供一些“兼容性列表”和其他指导性文档,但仍然可能有很小的技术细节跳出来妨碍整体系统正常运行。所以复杂系统的方案确立最好能够以实际测试为基础,而不是依照厂商承诺纸上谈兵。对那些没有同行业应用案例的项目,更是应该“先尝后买”。

不久前,某石油公司的一套集群系统,就因为过于乐观的相信厂商承诺,而陷入实施安装的泥潭。

这个系统原本采用传统的DAS存储方式,用于处理部分勘探数据。由于近来油价高起全球业务量骤增,该系统的工作负载也随之增加,解决后端存储瓶颈成为首要问题。
经过历时一年的调研,用户收集了来自几乎每一个关联厂商的产品介绍和方案建议。打印出来的卷宗堆积如山,其中的内容囊括了硬件存储设备、SAN/NAS架构、虚拟存储、集群文件系统、数据备份……等各个方面。

反复推敲之后,用户最终选定以“SAN+集群文件系统+4层交换”作为整体方案架构,以各领域信誉较高的厂商为产品供应商,并选用其中端产品。粗看起来,似乎这样的方案并无风险,但如果了解到具体的规模之后,恐怕就不会那么轻松了。

按这样的规划,将有至少3套满配置容量的中端存储设备和64台主机,同时接入一个至少128端口的SAN;64台主机访问存储设备的链路没有冗余;集群文件系统将在64台主机间共享所有存储空间;多台4层交换将联合工作,在64台主机间均衡负载。这其中很多方面都可称“规模庞大”,远远超出了一般技术人员的经验范围。具体到用户选定的产品,更是有很多搭配创了国内首例。如此复杂的工程,其实施难度可想而知。

事实上,该系统的安装调试工作经历了半年时间,最终用户不得不修改最初的方案设计结构,将这个大的SAN一分为三,才勉强让系统上线运行,最初规划的负载均衡和资源共享当然也就无从谈起了。

试想用户当初若能拿出一部分调研时间来搭建测试系统,也许结果会令人满意许多。

量变到质变

系统越大就越复杂,当复杂达到一定程度时,就需要有新的技术手段和机制出现,否则系统将无法工作,这是IT从业者完全理解的浅显道理。只不过这量变到质变的界限到底在哪里,却时常是考验认知和经验的难题。

时下全国都在准备实施“平安工程”,即公安和城管部门在城市各公共场所安放摄像头并实时监控,以提高打击犯罪和维护社会治安的效率。

从技术上看,平安工程所涉及的技术手段似乎与传统安全监控系统并无二至,都是由摄像头、DVR、数据网络、中心服务器等部分组成,只不过前端摄像头和DVR多些、网络分布广些、后端数据量大些。事实上,很多集成商最初提供给用户的方案建议,就是基于传统安防系统的版本,只在设备的配置数量上略做修改而已。殊不知这样的方案与平安工程的实际需求差之十万八千里之遥,根本不可能得以贯彻实施。

传统楼宇或工厂的监控系统,完全采用集中式管理机制。如果哪栋现代化大厦的每一层都有一个监控室,那一定是个天大的笑话。但是平安工程所要求的网络结构恰恰就是分散式的,如果习惯性的用集中模式提出解决方案,不仅在技术手段上会遭遇众多难题,而且从功能效果上也与平安工程的主旨背道而驰。

换句话说,就算集成商亏了血本搭建超级网络,有本事让全市数十万摄像头采集的视频全都汇聚到中心监控室,公安部门利用这个系统进行工作的场景也一定非常滑稽——中心控制室内上万名干警精神抖擞的盯着各自的监视屏幕,一旦发现情况,马上联系距离事发地点最近的派出所。由于派出所反倒无法接收视频信息,发现情况的干警不得不在电话里详细描述当事人的体貌特征。搞不好“万人监控室”会很吵杂,手机彩信还能排上用场。

上述几个存储技术理念与实际情况的冲突,都是为了提醒用户留意:技术理念大多看上去很美,但是否与您的需求吻合,就要靠实践去检验了。(责任编辑:石海峰 010-68479066)

董唯元专栏导读

·51CTO存储专家:全面探索SAS技术 (2006/4/21)
Parallel SCSI 和 Parallel ATA 二十多年前,Parallel SCSI 和 Parallel ATA标准问世时,兼容性根本不是问题。大家都以是非二元论来看这两种界面的角色,没有人预期,大家会需要它们在共同的应用上交互作业。SCSI主要是在企业级用户中应用; ATA主要应用在桌上型电脑。为了满足两种不同的应用要求,两种界面应用了截然不同..
·51CTO存储专家:今天你iSCSI了吗 (2006/4/13)
IP存储的热潮,已经在存储业内涌动了三年的时间。从最初的iSCSI、iFCP、FCIP百花齐放,到今天的iSCSI一支独秀,其间着实经历了一些戏剧性波折。当年IBM公司的200i作为世界首款iSCSI产品,当了一次挑战风车的“唐•吉柯德”。结果很多存储厂商都在后来的很长一段时间里行动迟缓,甚至裹足不前。
·51CTO存储专家:SAS教程 (2006/3/28)
SAS(Serial Attached SCSI)即串行SCSI技术,正逐步走入我们的视线。按照行业预期,SAS磁盘很快将取代目前的SCSI磁盘甚至FC磁盘而成为主流磁盘类型。可惜现在对SAS技术的讨论大多集中在应用层面,很少有具体的技术介绍。有鉴于此,笔者搜集整理了一些资料,权做抛砖引玉吧。
·51CTO存储专家:教育信息化与网络存储 (2006/3/15)
在开始报告之前,我谈一下对中国教育行业发展的一点初浅看法。国家的发展跟我们每一个人都是息息相关的,作为一个国人,一个国家高等教育的发展,跟这个国家的经济发展是息息相关的,尤其是一个国家长期发展的动力……
·51CTO存储专家:时尚 技术 感言 (2006/3/7)
陪夫人逛街购物,令每一位丈夫都心存忌惮,我也是一样。倒不是心疼钞票,主要是搞不懂那些随五彩斑斓却转瞬即逝的流行时尚,到底能给生活满意度增加多少个百分点,是否能抵消为此付出的肌细胞(体力)、神经细胞(精力)和新陈代谢周期(时间)。
·51CTO存储专家:DIY iSCSI全攻略 (2006/2/28)
本攻略仅供初学者以亲自动手的方式,建立对iSCSI技术的感性认识。不包括iSCSI详细理论和产品评测等内容。本攻略分四部分:“准备环境”、“安装软件”、“配置连接”和“i之初体验”。由于是为初学者写的攻略,难免有些地方会过于罗嗦,如果碰到熟悉的部分,别客气尽管跳过。
·51CTO存储专家:谈谈iSCSI技术的应用 (2006/2/20)
IEFT(Internet Engineering Task Force国际互联网工程任务组)终于通过了iSCSI协议标准,并发布了iSCSI协议的RFC(Request For Comments)草案。从去年9月的提交,到今年2月的通过,在长达半年的时间里,IETF的IP存储工作组到底都在做些什么?也许我们能从一位工作组主席早些时候的话中找到点线索,这位名叫大卫•布..
·51cto存储专家:存储技术20年 (2006/2/14)
董唯元简介:近10年的IT从业经验,其中近6年存储行业从业经验,所有从业经验均专注于IT技术,尤其是存储技术领域,熟悉目前大多数存储产品、技术、理念及趋势,曾领导过最多达12人的售前/售后技术工程师队伍,曾领导过近10人的技术队伍进行存储技术产品化,曾主持实施国家级单位核心存储系统10余次,熟悉金融、电信、媒体..


相关资讯

今日微信独家

《华尔街日报》报道日前援引知情人士的消息称,由于被美国政府以国家安全问题为由进行调查,联想斥资23亿美元收购IBM低端服务器业务的交易陷入了停滞状态。
关注新浪官博 订阅微信订阅号

订阅焦点周刊

论坛与活动

2016中国数据加速峰会直播专题
2016中国数据加速峰会直播专题[详细]
点击查看

精彩视频

最新文章

1111111
1111111
asdasd
asdasd
同有科技应用型大数据存储在南京掀起智能风暴
同有科技应用型大数据存储在南京掀起智能风暴
斯蒂芬斯蒂芬
斯蒂芬斯蒂芬
京东双11技术备战 构建多中心交易系统
京东双11技术备战 构建多中心交易系统