现在位置: 首页 > 大数据
2016-03-07 06:48 科技·视野 ⁄ 共 1236字 暂无评论
当大数据遭遇云计算 从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式计算架构。它的特色在于对海量数据的挖掘,但它必须依托云计算的分布式处理、分布式数据库、云存储和虚拟化技术。 云计算为什么能盛行呢?在互联网领域应用系统的构建:客户群体是不确定的、系统规模不确定、系统投资不固定、业务应用有很清晰的并行分割特征、数据仓库系统的构建、...
阅读全文
关于大数据和云计算的关系人们通常会有误解。而且也会把它们混起来说,分别做一句话直白解释就是:云计算就是硬件资源的虚拟化;大数据就是海量数据的高效处理。 虽然上面的一句话解释不是非常的贴切,但是可以帮助你简单的理解二者的区别。另外,如果做一个更形象的解释,云计算相当于我们的计算机和操作系统,将大量的硬件资源虚拟化之后再进行分配使用,在云计算领域目前的老大应该算是amazon,可以说为云计算提供了商业化...
阅读全文
2016-03-05 06:07 科技·视野 ⁄ 共 2208字 暂无评论
大数据 手机已经成为我们生活中必不可少的伙伴,可以用来工作,娱乐,购物,社交,搜索,找路等等,但我们没有意识到,所有这些便利的功能,背后都依赖海量数据的运算。同时,我们自己也成为数据“供应商”---当我们使用微信,数据会保存在腾讯的服务器上:当我们查阅天气预报,客气质量,搜索路线,接发邮件,不仅第三方服务商掌握了这些数据,通讯运营商也会了解我们一天的活动轨迹。至于看电影和购物,服务商很容易就此可以判...
阅读全文
异地多活的好处阿里巴巴的同学已经充分阐述,微博的初始出发点包括异地灾备、提升南方电信用户访问速度、提升海外用户访问速度、降低部署成本(北京机房机架费太贵了)等。通过实践,我们发现优势还包括异地容灾、动态加速、流量均衡、在线压测等,而挑战包括增加研发复杂度、增加存储成本等。 微博外部历程 先说说微博外部的历程,整个过程可谓是一波多折。微博的主要机房都集中在北京,只有很小一部分业务在广州部署,2010年1...
阅读全文
     1. 我现在在杭州的淘宝研发中心,在对康伯做采访。康伯先跟我们大家介绍一下你自己,包括你的团队。 大家好,我是康伯,这是我花名,我的真名叫高山渊。我的团队是负责整个淘宝的CDN的建设、运维。     2. 我们也知道,这一次淘宝“双十一”事件,其实CDN这一块也面临着非常大的压力。我们想了解一下,在这个事件之前,你做了什么样的预案?在整个的事件发生的过程当中,预案和你整个的...
阅读全文
首先,我想请问一下卢东明先生, 复杂事件处理(CEP)是什么时候出现的一项技术?它是怎么定义的?有哪些具体的技术,它跟我们之前看到的那些分析技术有什么不同? CEP这个词,英文全称叫Complex Event Processing,中文翻译成复杂事件处理。 其实在生活中很多时候我们会遇到复杂事件处理的情况,例如每个汽车里的电脑,实时监控着很多东西,比如车速,胎压,或者如油温等其他各项指标。在这样一个复杂的环境里,实际上电脑是通过...
阅读全文
中国移动浙江公司数据中心自2009年开始从小型机为主的架构开始了X86化、IaaS资源池化、PaaS资源池化的发展历程,数据中心在向云计算转型过程中软硬件管理的能力和效率上面临着诸多挑战: 1) 应用的快速部署开通受到极大制约:大部分应用系统有开发、测试、准发布和生产四个部署环境,各部署环境不一致,代码从开发到上线环节多、部署复杂、容易出错,无法满足业务快速上线的要求 。 2) 系统弹性扩展能力不足:应用系统部署以虚...
阅读全文
1. 背景 中国移动一级业务支撑系统做为中国移动的管理中心和全网业务的核心系统,有内容计费,网状网,BBOSS,统一电渠,一级营销,一级客服等系统,业务模式涵盖了交易、计费、服务等各种移动核心业务模式,系统功能各异复杂度高。 这些系统都是做为独立项目单独建设的。然而,近几年随着大数据、云计算、容器化、微服务、平台战略等新技术和新概念的层出不穷和快速发展,在业务支撑、架构能力、平台扩展性等方面对旧有的烟...
阅读全文
智慧城市在国内外许多地方已经展开建设,我国各地也都十分重视智能交通建设,国内智能交通行业总产值规模可能已超过1000亿。随着智慧城市建设的深入和高清化的普及,产生了海量数据。但大量的视频数据仍然是独立的、零散的,视频录像数据散布在各个行业、单位独立的系统中,政府之间跨警种、跨部门、跨区域的联网共享应用仍然较少,没有形成对数据挖掘利用的通用方法,更不用说针对百姓生活和社会管理的信息化应用。通过信息公...
阅读全文
目前,业内人士对大数据、云技术恐怕是耳熟能详,但究竟什么是大数据、云技术?对于公安实战系统来说,大数据、云技术又能带来哪些便利?是概念的炒作还是真的能融入到公安业务中,并内化为公安实战系统的技术和工具?本文中,我们一起探讨大数据、云技术在公安实战系统中的应用趋势。 一、常规数据库无法满足公安实战业务需求 近年来,平安城市建设飞速发展,各个街道、十字路口随处可见各种摄像机设备。它们为公安的日常治安...
阅读全文