科技难题 如何处理大数据存储中的问题
大数据在IT行业是与云计算并驾齐驱的另一大热门话题。“大数据” 指的是那些数量巨大、难于收集、处理、分析的数据集,这就容易出现存储问题,本文介绍的容易出现的几大问题。
“大数据”通常指的是那些数量巨大、难于收集、处理、分析的数据集,亦指那些在传统基础设施中长期保存的数据。这里的“大”有几层含义,它可以形容组织的大小,而更重要的是,它界定了企业中IT基础设施的规模。业内对大数据应用寄予了无限的期望商业信息积累的越多价值也越大只不过我们需要一个方法把这些价值挖掘出来。
为什么现在要大数据?
与以往相比,我们除了有能力存储更多的数据量之外,还要面对更多的数据类型。这些数据的来源包括网上交易、网络社交活动、自动传感器、移动设备以及科学仪器等等。除了那些固定的数据生产源,各种交易行为还可能加快数据的积累速度。比如说,社交类多媒体数据的爆炸性增长就源于新的网上交易和记录行为。数据永远都在增长之中,但是,只有存储海量数据的能力是不够的,因为这并不能保证我们能够成功地从中搜寻出商业价值。
数据是重要的生产要素
信息时代,数据俨然已成为一种重要的生产要素,如同资本、劳动力和原材料等其他要素一样,而且作为一种普遍需求,它也不再局限于某些特殊行业的应用。各行各业的公司都在收集并利用大量的数据分析结果,尽可能的降低成本,提高产品质量、提高生产效率以及创造新的产品。例如,通过分析直接从产品测试现场收集的数据,能够帮助企业改进设计。此外,一家公司还可以通过深入分析客户行为,对比大量的市场数据,从而超越他的竞争对手。
存储技术必须跟上
随着大数据应用的爆发性增长,它已经衍生出了自己独特的架构,而且也直接推动了存储、网络以及计算技术的发展。毕竟处理大数据这种特殊的需求是一个新的挑战。硬件的发展最终还是由软件需求推动的,就这个例子来说,我们很明显的看到大数据分析应用需求正在影响着数据存储基础设施的发展。
从另一方面看,这一变化对存储厂商和其他IT基础设施厂商未尝不是一个机会。随着结构化数据和非结构化数据量的持续增长,以及分析数据来源的多样化,此前存储系统的设计已经无法满足大数据应用的需要。存储厂商已经意识到这一点,他们开始修改基于块和文件的存储系统的架构设计以适应这些新的要求。在这里,我们会讨论哪些与大数据存储基础设施相关的属性,看看它们如何迎接大数据的挑战。

图片新闻
最新活动更多
-
4月15日立即观看>>> 【直播】鼎阳科技:旗舰级高端产品发布,聚焦通用电子测试测量行业新趋势
-
4月23日抢先报名>> OFweek 2021移动通信在线论坛暨展览会
-
4月29日立即报名>> OFweek 2021人工智能在线大会暨展览会
-
即日-4.30限时下载>> ADI精选白皮书 传感器应用指南
-
6月2-4日立刻报名>> 2021 上海国际生态舒适系统展览会
-
6月9-11日>>立即报名 CTIS消费者科技及创新展览会
推荐专题
- 电子工程师(物联网/智能硬件) 上海零零智能科技有限公司
- 1131CQ-物联网软件后端开发工程师 平安科技(深圳)有限公司
- KNX IOT 物联网智能家居嵌入式电子工程师 丰度电气(上海)有限公司
- 物联网交付工程师 中兴克拉科技(苏州)有限公司
- 市场营销经理(医药医疗物联网方向) 歌联科技(上海)有限公司
- 物联网项目经理 武汉邻盛智能设备有限公司
- 高级物联网应用研究开发工程师 武汉科迪智能环境股份有限公司
- Android开发工程师(物联网) 上海广升信息技术股份有限公司
- 医疗物联网销售-上海 昂科信息技术(上海)股份有限公司
- 物联网技术调试工程师 杭州富阳海康保泰安防技术服务有限公司
- DQE经理 广东省/深圳市
- 业务员 广东省/深圳市
- 业务经理 广东省/深圳市
- 电子工程师 广东省/深圳市
- 嵌入式/单片机软件工程师 广东省/深圳市
- 嵌入式软件工程师(ARM) 山东省/潍坊市
- 光学工程师 山东省/潍坊市
- Linux嵌入式软件工程师 浙江省/杭州市
- 研发项目经理 浙江省/杭州市
- CTO 浙江省/杭州市
发表评论
请输入评论内容...
请输入评论/评论长度6~500个字
暂无评论
暂无评论