Sun统一存储系统解决方案-OracleSoftw

©2010OracleCorporation如何建立完善和有效的数据归档管理系统分级存储管理与数据的归档©2010OracleCorporation历史业务数据的价值•历史数据是否还有价值–将来是否有价值–数据的价值是否被忽略–有价值的数据是否被删除–历史数据是否被淹没在无序的数据海洋中–不同业务部门的数据的价值•从历史数据中为企业挖掘出价值–新的市场机会和新的应用–新的应用是否有足够数据来支撑•数据仓库、数据挖掘、业务智能、业务决策、运营支持、风险管理•客户关系管理、贴身裁剪的服务计划–数据的有序长期存储和管理–随时随地的访问•法规的遵循•国家的安全©2010OracleCorporation法规遵从带来的挑战•现在全球有多地法规来约束上市企业。如：SEC、HIPAA、Sarbanes-Oxley、DOD5015.2-STD等。•SECRule17a-3&4–需要归档保留的数据，如•Reports•Accountrecords•Email•Statements•Notices•Communications•Inter-officememos–保留的期限•如审计数据要保留7年–数据不变性的要求导致存储技术使用•存储在WORM介质上的数据，可以做为呈堂证供•WORM光盘•WORM磁带(StorageTekVolSafe)©2010OracleCorporation一些行业数据归档保存期限的规定•各国政府有明确的医疗数据保存规定–美国的HIPAA•病历(原始病历或具法律效力的病历)、计费记录保存6年•小儿科病历、计费记录保存到病人满21周岁•病历在病人死亡后保存2年–«医用X射线诊断放射卫生防护及影像质量保证管理规定»•物理胶片至少保存5年，并定期进行分析和评价–«医疗机构病历管理规定»•病历档案的保存时间自患者最后一次就诊之日起不少于15年•《社会保险业务档案管理规定》实施办法–定期的社保业务档案保管期限分为10年、30年、50年、100年，–参保基础信息、待遇领取、核准材料的，保管期限为100年。–参保单位和参保人员的登记材料均需永久保存；–社会保险个人账户管理材料要保存100年；缴费证明材料等存10年。–社会保险业务档案中涉及会计、电子文档等档案材料，国家有特别规定的从其规定。©2010OracleCorporation数据归档存储技术的技术的演变•COM&COLD–计算机输出到缩微胶片(COM)–计算机输出到激光盘(COLD)•光盘库•磁带替代COM&COLD–WORM磁带技术•SunStorageTekT9840D,T10000B磁带机•SunStorageTekVolsafe磁带介质–磁带加密技术•SunStorageTekT10000B，T9840D–自动磁带库–WORM磁盘技术•在线、离线与近线归档–在线：磁盘–离线：磁带、光盘–近线：磁盘、自动磁带库和HSM类的软件©2010OracleCorporation在线数据近线数据远线数据离线数据没有数字化的数据的数字化数据是存储在SunStorageTek的存储设备上的!FreemanReports,2006©2010OracleCorporation在美国的部分保险用户介绍21stCenturyInsuranceVSM虚拟存储系统，9840磁带机，9740自动磁带库AETNA72台9310/4410自动磁带库AllstateInsuranceCompany148台9840和9940磁带机34台9310/4410自动磁带库，4台9740自动磁带库BlueCrossofMaineVSM虚拟存储系统9840和9490磁带机,9310自动磁带库BlueCrossBlueShieldofIllinois(Chicago)2台VSM3虚拟存储系统8台.9840磁带机，18台9940磁带机SVA虚拟磁盘系统©2010OracleCorporation在美国的部分保险用户介绍FarmersInsuranceVSM虚拟存储系统，64台9840磁带机，8台9310自动磁带库HartfordInsuranceGroupVSM虚拟存储系统，虚拟磁盘系统33台9840和9940磁带机15台9310自动磁带库，1台9740自动磁带库NationalGuardianLifeInsuranceCompany9840磁带机，15台9360自动磁带库PhoenixHomeLifeVSM虚拟存储系统，虚拟磁盘系统9840磁带机，3台9310自动磁带库PROGRESSIVECASUALTYINS145台9840磁带机，34台9310自动磁带库2台9500虚拟磁盘系统PrudentialInsuranceCompanyVSM虚拟存储系统97台9840磁带机52台9310/4410自动磁带库©2010OracleCorporation大型数据归档案例–某国政府国税局•40多个磁带库组成•占地约600m2•约20多万盘磁带AABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABB©2010OracleCorporation大型数据归档案例-某国政府部门•4个ACS，由128个磁带库组成•占地约1800m2•约68万盘磁带AABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABBAABB©2010OracleCorporation©2010OracleCorporationwww.shutterfly.com业务需求以合理有效的成本提供安全的存储、访问和归档保护用户的照片；将各个业务部门的存储整合、统一管理管理起来；保障三年的存储空间，不会因为存储空间的限制而影响业务的增长；一年超过10亿张JPEG格式照片，每年成倍的增长；解决无法备份数据的问题。Sun的解决方案三台4600服务器，运行SolarisCluster/QFS一级存储：6台Sun6540磁盘阵列(Oracle数据库)存储归档管理(分级存储):30PB的SAM-FS软件许可二级存储SAM-FSCache:4台Sun6540共有209TB的500GBSATA-II磁盘三级存储：1台10,000槽的SunSL8500自动磁带库13台SunT10K磁带机驱动器未压缩的存储容量：5PB(5,000TB)©2010OracleCorporation©2010OracleCorporation分级存储给Shutterfly带来的利益从“过去的备份时间无法承受”到“备份时间减少为零”极大保障用户数据的安全–3份拷贝该架构可以承受数据量100倍的增长保障业务的持续发展和新应用的推出存储空间和存储管理不再是障碍运营成本每年可以节省40万美金维护、电费等消除了介质迁移的问题©2010OracleCorporationSun公司的数据归档存储架构解决方案•数据归档内容管理应用软件层•操作系统和文件系统层–SAM-FS和QFS软件•磁盘设备层–ST6X80/ST25X0/J4000磁盘阵列–Sun7000统一存储系统•磁带设备层–支持WORM介质的T9840D磁带机•适合频繁访问的数据的归档–支持WORM介质的T10000B,LTO磁带机•适合长期深层归档的数据–具备加密功能的T10000B,T984D,LTO磁带机•适合要求加密保护的归档数据–SL24/SL48/SL500/SL3000/SL8500自动磁带库©2010OracleCorporation选择适合长期数据归档的存储平台利用SAM-FS节省数据存储的成本之前:将所有归档数据存放到磁盘=$$$高维护费用高能耗-不环保之后:将不经常访问的数据存放在磁带上;透明于用户和应用=$环保©2010OracleCorporationSAM-FS基于策略的多级数据存储及自我保护能力©2010OracleCorporation安全监控数据的归档•平安中国/平安城市–十万个摄像头,每天数据量超过300TB-38.88PB–365五天的保留期，一年75PB–5.678EB•交通管理监控录像•E-Plate(RFID)、车牌识别系统和行车路线追踪记录ResolutionFrameFPSMB/hourGB/day#ofTB/dayPB/monthPB/yearTB/dayPB/monthPB/yearSize(KB)MJPEGMJPEGCameraMJPEGMJPEGMJPEGMPEG-4MPEG-4MPEG-4320x240NTSC851443.456100,000345.6010.37126.14207.366.2275.69640x480NTSC32557613.824100,0001,382.4041.47504.58829.4424.88302.751280x10248051,44034.560100,0003,456.00103.681,261.442,073.6062.21756.861600x120013052,34056.160100,0005,616.00168.482,049.843,369.60101.091,229.902048x153618053,24077.760100,0007,776.00233.282,838.244,665.60139.971,702.942560x192030055,400129.600100,00012,960.00388.804,730.407,776.00233.282,838.24320x240NTSC8102886.912100,000691.2020.74252.29345.6010.37126.14640x480NTSC32101,15227.648100,0002,764.8082.941,009.151,382.4041.47504.581280x102480102,88069.120100,0006,912.00207.362,522.883,456.00103.681,261.441600x1200130104,680112.320100,00011,232.00336.964,099.685,616.00168.482,049.842048x1536180106,480155.520100,00015,552.00466.565,676.487,776.00233.282,838.242560x19203001010,800259.200100,00025,920.00777.609,460.8012,960.00388.804,73