现在位置: 首页 > 大数据
这四个项目能放在一起比较的背景应该是分布式计算的演进过程。 开源分布式计算的第一个流行的框架是 Hadoop 项目中的 MapReduce 模块。它将所有计算抽象成 Map 和 Reduce 两个阶段,在计算时通过增加机器,并行的读取数据文件,进行 Map 或 Reduce 的操作,并将结果写到文件中。如此反复得到最终的结果。 上面过程中,每个 Map 和 Reduce 阶段所能表达的计算逻辑是有限的,因此完整的业务逻辑往往包含了多个阶段。注意到每个阶...
阅读全文
2019-01-02 21:25 科技·视野 ⁄ 共 2373字 暂无评论
1.Hadoop 应用最普遍的有:Hadoop,是目前应用最广泛的大数据技术,特别是针对文本及视频等非结构化数据。除分布式文件系统之(HDFS)外,伴随Hadoop同时出现的还有大数据集处理MapReduce架构。 Hadoop是由Apache基金会开发的分布式系统基础架构。用户不用了解分布式底层细节,就可开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop框架核心是:HDFS(分布式文件系统Hadoop Distributed File System)和MapReduce...
阅读全文
大数据的时代,数据是隐私,是秘密,是权力,也是钱。 谁控制数据,谁控制 社会运转的细节。 你上司不知道的,京东知道。你老公不知道的,阿里知道。你老婆不知道的,企鹅知道。 比如,我想胁迫你,只要把你和谁一起去了酒店开房告诉你老公(老婆)、公众媒体就可以。 比如,我想知道你最近见了谁,只要对比一下最近你和你的朋友圈的出行记录就可以。 等等等等。 数据越多,越丰富,越有价值。我可以什么也不问你,知道你的一切...
阅读全文
文章目录 单机平台时代,重在警情接收通报 网络传输时代,大容量多功能成为主流 去中心化将是未来,上下游结合才能开花 报警运营管理平台(俗称接警中心软件)作为联网报警服务运营的控调枢纽,在服务体系中的作用不言而喻,其稳定性、安全性直接关系着报警服务质量乃至企业的生死。而经过了单机时代、网络时代之后步入到如今的大数据时代,报警运营管理平台又是怎样的一...
阅读全文
近年来,云计算、云存储、大数据等技术在互联网行业得到了高速发展,技术、产品都得到了较好的市场检验,已被全社会广泛认可。在安防行业,在市场客观需求引领下,主流厂商积极将相关技术引入到行业内,并结合行业特征进行演进,推动云计算、云存储、大数据在行业内的高速发展,同时推出一系列广受市场认可的产品与理念,而云计算、云存储产品也成为各主流厂商主在有关平安城市解决方案中的核心系统之一,这其中所应用的核心技...
阅读全文
1.智能交通行业的发展 总结近10多年智能交通行业的发展,我们发现城市智能交通发展是信息化发展的缩影,从信息化、系统化向智能化发展,可以大致归类成三个阶段: 基础建设阶段 城市智能交通的发展,处于首位的是必要的交通基础设施建设。例如市中心区域主干道的交通信号自动控制设备的覆盖,干线协调系统的搭建;主要干道的交通视频监控;重要交叉路口、路段数字化执法设备的建设等交通基础设施,以及此类集成子系统的中心后台...
阅读全文
2016-09-02 11:41 科技·视野 ⁄ 共 1832字 暂无评论
一、背景与挑战 目前视频图像应用已经深入到公安机关对社会维稳建设的各项行动中,如何在“看得清”之后实现“用得准”是公安部门越来越关注的问题。视图数据是城市安全的宝贵财富,应用系统的价值“三分在技术、七分靠数据”-平安城市系统已经积累了大量的卡口数据和图片视频,但是现有应用还仅仅停留在简单的事后查询上。 如何进一步运用海量的视图数据,并联动公安网上大量业务数据进行大数据碰撞分析,有效挖掘视图的价值信息并...
阅读全文
2016-08-13 13:55 科技·视野 ⁄ 共 2361字 暂无评论
在当前大数据变革的时代,移动互联网、智能终端、新型传感器快速渗透到地球的每一个角落,人人有终端、物物可传感、处处可上网、时时在链接,数据增长速度用几何式增长甚至爆发式增长都很难形容得贴切。有机构预计,到2020年全球数据使用量将达到约44ZB(1ZB=10万亿亿字节),将涵盖经济社会发展各个领域。由此产生的革命性影响将重塑生产力发展模式,重构生产关系组织结构,提升产业效率和管理水平,提高政府治理的精准性、高效...
阅读全文
1.视图大数据平台架构 1.1 视图大数据平台系统结构 视图大数据平台是上层视图应用的基础,系统采用通用开源的hadoop开放架构,并集成了优质的视图结构化语义分析智能算法,同时根据上层业务的需求,封装了一系列视图大数据的服务接口,为上层各类应用系统和实战系统提供端到端的视图处理服务能力,而在底层视图大数据平台则集成了视图云存储和各类IT基础资源池,来作为存储和处理海量原始视频的集成设施。 2.车辆大数据系统 ...
阅读全文
健康医疗大数据是国家重要的基础性战略资源。健康医疗大数据应用发展将带来健康医疗模式的深刻变化,有利于激发深化医药卫生体制改革的动力和活力,提升健康医疗服务效率和质量,扩大资源供给,不断满足人民群众多层次、多样化的健康需求,有利于培育新的业态和经济增长点。为贯彻落实《国务院关于印发促进大数据发展行动纲要的通知》(国发〔2015〕50号)要求,顺应新兴信息技术发展趋势,规范和推动健康医疗大数据融合共享、...
阅读全文