仅仅几年的时间,大数据技术就从之前的炒作阶段逐渐发展成为新数字时代中的核心技术之一。2014年,大数据慢慢地从测试阶段走向研发和生产。2015年,大数据将如何发展,发展重点是哪些呢? a&s就此相关问题向北京蓝色星际软件技术发展有限公司产品经理颜延峰进行采访,探讨大数据相关的技术发展趋势。
Q:为什么要发展大数据技术?
A: 大数据是互联网发展到现今阶段的一种表象或特征,随着云计算技术的发展,原本很难收集和使用的数据开始容易被利用起来了,通过各行各业的不断创新,大数据会逐步为人类创造更多的价值。大数据时代的到来可以说是计算机技术发展的必然,也可以说是一种无奈。“必然”取决于用户有大数据处理的需求,比如为了快捷准备的做出决策,需要在大数据中快速找到相应的依赖数据;之所以说是“无耐”,是伴随着计算机发展,数据呈现爆发式发展,鱼龙混杂,如何快速提取和管理相应数据?
Q:您怎样看待目前的大数据市场?
A:在现阶段,大数据还处在初期发展阶段,大数据的价值还未被真正发掘,且大数据本身就很“大”,泛泛而谈大数据应该是微软、IBM这类公司需要考虑的事情,且不一定能做好,对于中小型科技企业来讲,针对行业和某种应用大数据,应该是短期发展的重点。简单些就是:前景很好,但需要在探索中行进,可借鉴的成功经验不是很多。
Q:大数据得以实现的核心技术有哪些?
从“数据源-环节-目标”的思维出发,大数据无非是获取数据、存储数据、分类检索及应用数据,其核心技术主要在以下几个环节:
一、 大规模并行处理(MPP)数据库
二、 分布式文件系统
Q:将大数据技术引入安防的困难点有哪些?
A:常规的大数据应用,在存储数据时,就已经通过数据库具备了一个较好的检索和统计接口,所以往往关注的是数据的存储和分析统计;但视频监控系统,视频往是以视频流结合报警进行存储,除了按照时间和报警进行检索条件外,很难对数据自身进行检索和分析,这时需要借助智能分析等技术手段来辅助处理数据。由于智能分析除了周界保护、人脸分析、物品丢失遗留、视频浓缩、车牌识别等应用相对成熟外,其他误报率还很高,且对环境有很强的依赖性。
Q:目前安防行业是如何利用大数据技术处理数据信息的?
A:在安防行业视频数据处理主要采用事中和事后两种手段,事中是指特殊事件发生时可即使产生报警并形成相应的索引,如:移动侦测、人数统计、人脸识别、车牌识别等;事后是指对一段视频录像进行事后处理,主要是指对已存在的录像资料进行视频的二次处理,如:视频浓缩、去雾去噪处理等。在目前阶段,无论采用哪种技术,目前还均需要人为干预,还很难做到完全的智能。
Q:目前可以落地的大数据应用的系统架构是什么样的?
A:在视频监控领域,目前使用的比较多的有两部分:第一种:云存储和云检索;第二种为事后视频数据的分析和处理,如视频浓缩等技术。
Q:贵公司在大数据方面的投入和目前的实力怎样?
A:大数据挑战传统的视频监控存储与检索机制,为各厂家带来了新的挑战和机遇,针对蓝色星际针对大数据的开发和应用,投入了很大的精力,比如公司下一代视频监控系统平台:星际云,结合云视频、云数据、云分析形成一套完整的解决方案。
Q:大数据时代,该如何应对数据安全问题?
A:大数据时代,数据自身的安全是很好保障的,但隐私却很难保障。大数据“大”的概念是无所不含,信息全面。而隐私恰恰是一个与之矛盾的话题。大数据可以为我们带来便捷,但带来便捷的同时,人的隐私权势必会有所降低,不然数据从哪里来呢?目前最好的办法就是,在人们所能接受的隐私范围内,提供良好便捷的大数据服务。比如:公共场合、非私密数据等。
Q:大数据将会对安防产业格局产生什么样的影响?
A:目前来看,在安防产业格局中,大数据还处在一个初级阶段,一是大数据自身技术的发展还不足够成熟,同时相关安防技术也存在一些瓶颈。短期内,大数据在安防行业,更多的倾向于数据的存储和检索。
Q:您怎样看待大数据与云计算的结合?
A:大数据离不开云计算,“大”为集大成,海量的数据;有了海量的数据,靠单台PC去运算检索,则很难满足引用,云计算恰是为满足此应用而来的。
Q:传统安防企业与互联网企业在大数据方面有哪些结合与冲突?
A:侧重点不同,传统安防行业的发展方向为专业、互联网企业的优势在通用,两者很难说孰优孰劣。两者更多是一种合作关系,而非竞争关系。