EMC在大数据分析上下了大笔投注,并整合Hadoop文件系统到其Isilon向外扩展的文件管理器,提供并允许他们的Greenplum分析产品使用Hadoop数据。
Hadoop是一种对象式的分布式和可扩展的开源文件系统(HDFS),跨datanodes(数据节点)和一个单一的NameNode(命名节点)的集群实现,在一个更大的集群中,带有第二个NameNode来快照主节点的数据结构,并在主节点失败时用作重建资源。NameNode包含关于在datanodes上文件存储的元数据,在需要时为它们服务。
HDFS今天流行在大学,特别是在生命科学领域,以及一些Web 2.0应用。 EMC强调的一部分是NameNode是一个单点故障,实际上没有针对它的高可用性,他们声称,排除了其用于企业级数据中心的可能性。该公司估计,有一个巨大的机会去提供Hadoop系统,在企业数据中心里用于大数据分析,如果HDFS能够可用达到企业级强健度,并由普通存储管理员管理的话。这就为什么要提供一个针对Greenplum HD分析前端的Isilon-HDFS整合存储后端。
EMC的Isilon OneFS v6.5版本,提供了一个一站式的Apache Hadoop商店,它被看作Hadoop世界缺少的设施,即:
一个共享的,而不是一个专用的存储基础设施;
高可用性的NameNode;
通过快照(SnapshotIQ),复制(SyncIQ)和备份(NDMP备份)的保护;
提高存储效率超过3倍,从基本HDFS的数据镜像到80%的水平;
单独扩展计算和容量的能力;
自动化数据导入/导出通过NDS,CIFS,FTP,和HTTP
Isilon的产品管理总监Nick Kirsch,谈到NameNode的实施:“这是唯一的。NameNode现在是我们的分布式元数据的一部分,每个节点都是一个NameNode。”
下一代Greenplum已经被Apache Hadoop认证,提供平台管理和控制,以及与Greenplum数据库的并行分析访问。EMC公司还提供设计和培训服务,世界各地的24x7支持和发展路线图。
EMC对比了他们与甲骨文和NetApp的方法,与任何一个都不同,EMC声称可以在他们的存储阵列上提供Hadoop的原生整合;针对NameNode的完整HA;相同级别的存储效率;多协议访问和企业级保护功能。
普渡大学曾在其统计部门试用Isilon/Hadoop的组合并获得认可,他们说:“现在没有一个单独的Hadoop数据竖井的需求,它们的用户现在有了“一个单一的共享存储资源,针对数据计算和分析。”他的统计人员做出更多的统计信息并付出更少的Hadoop基??础设施管理。
EMC公司声称这些新增的功能,将会使Hadoop更多的用于企业,并且企业Hadoop的用户将越来越多地看到数据科学家(见Wikibon的描述)来统计分析他们有意义的大数据集——信息。毕竟,决策数据的能力是大数据的获利。
在Isilon上的EMC Greenplum HD可立即通过EMC及其渠道合作伙伴销售。
1. 前端:在每个监控点安装百万高清数字摄像机,根据监控环境的不同选用普通枪机、红外枪机、红外半球和高速球等不同的机型。
2. 传输:各楼层摄像机通过网线和交换机级联(最多4次)进入弱电井楼层交换机,然后通过网线全部接入监控中心机房交换机。
3. 监控中心:监控中心主要由四部分组成,机房交换机,DVR主机、电视墙、管理主机。前端所有摄像机的信号都接入机房交换机,每台DVR主机也接入交换机,每台主机显示16路图像,录像资料保存在每台DVR主机中,根据录像时间需要挂载不同大小的硬盘或是磁盘柜。每台电视机通过一个解码盒接入机房交换机,通过DVR主机切换图像上电视墙。
4. 分控中心:包括分控中心管理主机,显示设备。
5. 客户端:客户端主机通客户端软件对摄像机进行访问,最大支持36路同屏显示。
三、 电梯监控
电梯监控是智能大厦网络视频监控中很重要的一个环节,因为电梯井道是一个较为复杂的环境,很多工程在电梯监控中受到不同程度的干扰,目前电梯传输中大部分都是采用视频基带(双绞线)传输或增加抗干扰器传输,当然也可以采用射频传输或无线传输方案。波粒百万高清监控方案中采用的是无线网桥传输。
使用双绞线传输时,我们要清楚双绞线在布设过程中需要注意一些方法,比如双绞线本身较脆弱,选择线缆要用合格的,柔韧性达标的产品。在井道中布设需要和随行电缆捆扎在一起,首先在随行电缆上用大扎带绑扎一次,再从大环内穿过一个小扎带固定双绞线。20CM捆扎一次,每段预留3CM的余地(以可以容纳一根手指为准)在电梯井道中部出线最为可靠,不过双绞线在轿厢顶部需要预留、固定好。
如果中部无法出线,那么在随行电缆上捆扎至电梯机房(从中段往上的捆扎可以不用预留3CM),从电梯机房出线时注意不要走强电线槽,和电机保持一定的距离,做好隔离再引到监控中心即可。
还有一种方法是直接利用随行电缆内提供的视频线出电梯井道后再使用有源传输器通过双绞线传输到监控中心。
这几种方法都是需要根据现场施工环境来选择的,以下是双绞线传输简单的系统示意图。 当然,最简单最方便的就是无线网桥传输了,只需一对无线网桥就可以将电梯摄像头视屏图像传至监控中心。
四、 系统应用优势及特点
波粒数字百万高清监控系统不仅功能强大,在性能上也超过常规的模拟视频监控系统。本系统优势主要表现在以下几方面:
1、 高品质的图像质量:所有摄像机均是百万高清数字摄像机,分辨率达到1280×720,每秒25帧数全实时,图像清晰自然,网络延时短(平均在0.2秒以内),且低照性能优越(0.05Lux),提供丰富的曝光模式选择,以适用于各种复杂的监控环境;
2、 施工维护低难度、低成本:不需敷设大量的视频电缆、电源线和采用特定的传输设备(例如光端机),本系统采用总线分布式的组网方式,施工简单,所需传输设备成本低(例如交换机、光纤收发器),且利于日后的维护;
3、 系统结构灵活,可扩容性、升级性强:采用标准的组网方式,支持IP单播、组播功能。采用模块化设计,无论前端扩容和中心扩容都可以充分利用前期资源,降低扩容投入成本。前端摄像机和中心管理软件均支持本地升级,无需硬件改动便可实现系统功能的升级。
4、 易操作性:监控中心系统管理软件的操作平台是Windows XP中文版,控制界面为图形方式,界面友好,用户可以非常迅速地熟悉操作软件。
5、 自主开发:系统的核心硬件设备和管理软件均属自主开发,能够及时提供良好的售后服务,响应用户的特殊需求,针对用户的要求进行功能方面的量身定做(例如报警联动、流媒体服务器)。
图一 智能大厦网络视频监控系统示意图
图二 双绞线传输示意图