2015-12-07 10:09:03
Hadoop, 深入分析大数据集成与安全问题
想要让网络可用而易控,需要自动化处理大数据的办法——保存、阐释信息,对其分类并通过命令检索。人们需要更优秀的自动化搜索引擎。 <详情>
2015-12-07 09:54:35
赛道单挑:MapReduce与Spark到底谁快?
通常人们认为Spark的性能和速度全面优于MapReduce,但最新的对决显示MapReduce在某些方面也有胜场,而且数据规模越大优势越大。 <详情>
2015-12-07 09:40:37
大数据时代:关于Hadoop12个事实
现如今,Apache Hadoop已经无人不知无人不晓。当年雅虎搜索工程师Doug Cutting开发出这个用以创建分布式计算机环境的开源软件库,并以自己儿子的大象玩偶为其命名的时候, <详情>
2015-12-07 09:35:53
大数据VS小数据:9种数据类型及利用方法
如今,具有压倒性的数据量使得市场营销人员和广告商们已经难以理解哪些信息非常重要,哪些信息是纯粹的噪音,哪些数据是正确的?而哪些数据又是可以信赖的?不同类型的数据 <详情>
2015-12-07 09:22:46
海量数据处理分析中的三个问题和经验总结
海量数据是发展趋势,对数据分析和挖掘也越来越重要,从海量数据中提取有用信息重要而紧迫,这便要求处理要准确,精度要高,而且处理时间要短,得到有价值信息要快,所以, <详情>
2015-12-05 11:12:00
TDBank:腾讯万亿级实时数据接入系统
随着大数据时代的到来,各大互联网公司对于数据的重视程度前所未有,对数据的依赖也越来越重。许多商业公司也推出了自己的大数据平台,同时,也有很多相关的开源系统。总 <详情>
2015-12-05 11:05:00
网易的Spark技术实践
对于大多数的大数据而言,实时性是其所应具备的重要属性,信息的到达和获取应满足实时性的要求,而信息的价值需在其到达那刻展现才能利益最大化,例如电商网站,网站推荐系 <详情>
2015-12-05 10:59:00
Pinot:LinkedIn的实时数据分析系统
Pinot是一个适用于Web的实时数据分析系统,由LinkedIn设计开发,现在已经成为LinkedIn的分布式实时数据分析基础设施,支撑着LinkedIn内外30多个分析产品。LinkedIn的各种数 <详情>
2015-12-05 10:41:00
大数据分析与应用案例介绍
大数据已经不简简单单是数据大的事实了,而最重要的现实是对大数据进行分析,只有通过分析才能获取很多智能的,深入的,有价值的信息。 <详情>
2015-12-05 10:18:02
Hadoop与分布式数据处理 Spark VS Hadoop有哪些异同点?
虽然Spark与Hadoop有相似之处,但它提供了具有有用差异的一个新的集群计算框架。首先,Spark是为集群计算中的特定类型的工作负载而设计,即那些在并行操作之间重用工作数据 <详情>
2015-12-05 10:00:17
Hbase/Hdfs删除节点
线上有台服务器随时可能会挂掉,所以需要把在这个服务器上hbase的regionserver和hdfs的datanode节点移除。然后重新拿台新服务器部署接管。 <详情>
2015-12-05 09:53:21
带您了解大数据
大数据,或称巨量数据、海量数据;是由数量巨大、结构复杂、类型众多数据构成的数据集合,是基于云计算的数据处理与应用模式,通过数据的集成共享,交叉复用形成的智力资源 <详情>
2015-12-05 09:47:07
SQL on Hadoop
Hadoop生态系统中,如果存在一个领域是竞争最激烈的,那一定是SQL on Hadoop! <详情>
2015-12-04 10:54:14
大数据分析平台,路在何方?
随着越来越多的应用涉及到大数据,而这些大数据的属性,包括数量,速度,多样性等等都是呈现了大数据不断增长的复杂性,那么未来的大数据分析平台将走向何方呢? <详情>
2015-12-04 10:43:00
TB级数据处理的挑战和应对方案
虽然说大数据已经不算一个新的概念,不过它的作用却日趋重要。大数据已经深入到各个领域,潜移默化的影响着我们的生活。 <详情>
2015-12-04 10:19:28
公司的大数据业务为什么都基于Hadoop方案?
选择hadoop的原因主要有以下三点:1.降低成本;2.生态圈成熟;3.可以解决问题。 <详情>
2015-12-04 09:44:20
如何成为Spark大数据高手?
Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台,它立足于内存计算,性能超过hadoop百倍,从多迭代批量处理出发,兼收并蓄数据仓库、流处理和图计算等多种计算 <详情>
2015-12-04 09:28:50
大数据应用场景下的数据加密
近日,清华大学吕强勇介绍了基于流加密的软硬件协同安全框架。这种框架创新性的将软件和硬件结合在一起进行适用于大数据应用场景下的数据加密。其中提到的基于PUF的用户数 <详情>
2015-12-04 09:23:20
大数据案例:啤酒尿布的关联算法怎么来的?
在一家超市中,通过大数据分析发现了一个特别有趣的现象:尿布与啤酒这两种风马牛不相及的商品的销售数据曲线竟然相似,于是就将尿布与啤酒摆在一起。 <详情>
2015-12-03 11:13:53
百万级别数据,数据库Mysql,Mongodb,Hbase如何选择?
现在需要做一个数据存储,500w左右的数据,日后每天大约产生5w条左右的数据。想把这些数据存储起来,供日后的数据分析用?使用上面说的三种数据库中的哪中比较好?是否有必 <详情>
2015-12-03 11:03:47
大数据处理工具将全面取代传统报表工具
随着大数据和大数据分析工具的兴起,传统的报表工具很可能会被取代乃至全面退役。这是技术发展的必然也是现实社会的需要,正是这一波波技术革新与创新推动者人类的社会的进 <详情>
2015-12-03 10:53:17
Storm概念解读以及特点分析
Storm是什么如果只用一句话来描述storm的话,可能会是这样:分布式实时计算系统。按照storm作者的说法,storm对于实时计算的意义类似于hadoop对于批处理的意义。 <详情>
2015-12-03 10:50:09
Spark概念解读以及与Hadoop技术对比
Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark 启用 <详情>
2015-12-03 09:45:27
盘点:55个最实用大数据可视化分析工具
近年来,随着云和大数据时代的来临,数据可视化产品已经不再满足于使用传统的数据可视化工具来对数据仓库中的数据抽取、归纳并简单的展现。新型的数据可视化产品必须满足互 <详情>
2015-12-02 11:23:37
统计大数据面临大挑战
大数据具有数据体量巨大、数据类型繁多、价值密度低、处理速度快的特点。在带来各种光鲜机遇的同时,大数据也带来了新的挑战,尤其是关系国计民生的统计大数据,如应用不慎 <详情>
2015-12-02 11:18:48
数据分析如何从入门到提高
现今随着互联网科技的高速发达,数据分析发展得越来越火热,已经广泛被各大公司、企业与个人所接受。不仅金融行业需要它的力量,在普通的生产加工行业也需要数据分析的结果 <详情>
2015-12-02 09:13:38
大数据分析方法解读以及相关工具介绍
要知道,大数据已不再是数据大,最重要的现实就是对大数据进行分析,只有通过分析才能获取很多智能的,深入的,有价值的信息。 <详情>
2015-12-02 09:08:48
常见的高可用MySQL解决方案
MySQL数据库作为最基础的数据存储服务之一,在整个系统中有着非常重要的地位,因此要求其具备高可用性是无可厚非的。有很多解决方案能实现不同的SLA(服务水平协定),这些 <详情>
2015-12-01 11:28:35
Java创建新的大数据机遇
Java生态系统正在不断成长和发展。同时,那意味着更好的商业应用于真实世界的场景,并且Java程序员有更多的机会了解互联网的真实状况。 <详情>
2015-12-01 11:23:00
大数据分析工具:数据从未如此清晰
在当今世界,到处都在谈论大数据和大数据的价值。但若是涉及大数据的应用,则大数据瞬间又变为一个模糊的概念。这种忽近忽远的感觉让很多人感觉大数据就在眼前,却无法利用 <详情>
2015-11-27 11:15:35
一个Hadoop老兵的自白
在使用 Hadoop 的时候,相关开源软件的选择是个难题。MapR 支持开放式 API,提供了一个无偏见的 Hadoop 开源软件集合, 使用户能够选择自己需要的开源项目。 <详情>
2015-11-26 10:34:12
大数据三问:大数据“热”的冷思考
科学的发展在深刻改变人类生产生活方式的同时,也制造了许多令人目不暇接的神话。当泥沙俱下且呈雪崩式的大数据袭来时,我们更应保持一个清醒的头脑,用中国的古训来说,就 <详情>
2015-11-24 10:49:00
史上最实用的大数据实施系统计划
大数据——这个词看起来比较深奥,一般非专业人士听着觉得相对复杂,觉得可能需要很大成本来部署和实施。然而幸运地是市面上已经有一些云服务来帮助我们让大数据变得更简单 <详情>
2015-11-24 10:46:00
实用大数据系统设计
大数据一般人听着比较复杂,觉得可能需要很大成本来部署和实施。幸运地是市面上已经有一些云服务来帮助我们让大数据变得更简单。另外,如果你选择合适的开源工具,也往往会 <详情>
2015-11-24 10:16:00
数据分析与网络营销存在什么样的关系
虽然国内网络营销发展的市场空间很大,但是也存在着一些弊端与不足,这时若是能发挥数据在网络营销中的积极作用,那对于网络营销来说,将会提升到一个新的发展空间。 <详情>
2015-11-23 15:10:00
还不懂Hadoop分布式文件系统HDFS的工作原理?
Hadoop分布式文件系统(HDFS)是一种被设计成适合运行在通用硬件上的分 布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。它能 提供高吞吐量的数据访问 <详情>
2015-11-18 11:02:00
用于实时大数据处理的Lambda架构
Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构,包括有:高容错、低延时和可扩展等。Lambda架构整合离线计算和实时计算,融合不可变性(Immunability) <详情>
2015-11-02 13:54:27
了解这些,轻松打开云端大数据管理“任意门”
大数据对于传统IT系统来说是个大问题,因为处理海量的结构化和非结构化数据有很多事情要做。然而,云计算可以让IT管理大数据集,且无需独占本地系统。 <详情>
2015-09-20 13:28:15
数据中心软件创业公司激增:活下来很难
最新一期英国《经济学人》杂志印刷版撰文称,随着网站和应用的大幅增加,数据中心行业也在不断扩容,也由此催生了一批专门开发数据中心效率软件的企业。 <详情>
2015-07-15 15:22:00
看到垃圾桶别绕路走 它的wifi网速可能高达50-75M/S
这种垃圾桶还具有内置芯片,由太阳能电池提供能量,城市的垃圾处理部门后台可以实时监测垃圾桶状况,垃圾桶容量将满就会发出信号,垃圾车和清洁车就可以根据反馈去收拾那些 <详情>
2015-04-21 13:31:17
大数据没用?5个通过大数据分析提升客户体验的方式
在互联时代,拥有一个大数据战略来收集、存储、组织和分析广泛客户数据的踪迹,对于及时开展个性化客户交互至关重要。 <详情>
2015-04-21 13:17:00
大数据产业 关键在深化应用(图)
4月,可以说是江门的“大数据月”。 <详情>
2015-04-20 11:41:03
梦工厂动画CEO:不迷信大数据只迷信耐心与好故事
成立于1994年的梦工厂(DreamWorks SKG)是好莱坞六大电影制片厂(迪士尼、华纳兄弟、派拉蒙、20世纪福斯、环球、哥伦比亚)之外数一数二的独立制片大厂。 <详情>
2015-04-17 10:33:00
大数据成为“互联网+”发动机 机构兵分四路掘金
从机构对大数据的投资情况看,已经兵分几路开展布局。 <详情>
2015-04-17 10:23:00
大数据炼油?中石化牵手阿里布局“互联网+”
昨日,中石化新闻发言人吕大鹏向《每日经济新闻》记者证实,中石化将与阿里在信息系统等技术上有所合作。 <详情>
2015-04-01 11:25:34
不要让大数据成为“老大哥”
20年前由学者提出的“数字化生存”(Being Digital)在今天真正变成了现实。我们每个人的信息、踪迹、朋友圈、偏好、生活方式都被网络记录、留痕、储存,虽然它们分散在不 <详情>
2015-02-04 10:52:00
大数据时代的危害性与局限性
2月3日消息,白宫去年曾发表书面声明称,“大数据将作为历史性的驱动因素,帮助美国持久性地促进社会与经济活力”,其创造的社会价值与经济价值得以遵从该国提倡的“隐私、 <详情>
2015-01-30 11:39:00
芝麻开门 大数据征信体系揭秘
1月28日,蚂蚁金融服务集团(下称“蚂蚁金服”)旗下的芝麻信用首次测试个人征信系统,这也是1月5日央行发布允许8家机构进行个人征信业务准备工作通知后,首家推出该系统的 <详情>
2014-12-11 09:05:26
IBM将大数据分析和安全能力引入苹果移动设备
IBM为苹果移动设备量身打造企业云服务,可用于银行、保险、电信等行业。 <详情>
2014-12-01 10:43:26
大数据颠覆传统制造的10条途径
11月29日消息,麦肯锡咨询公司今日发布了《如何利用大数据改进制造业》的文章,就大数据及高级分析如何使生物制药、化工和离散制造更加合理化给出了深度分析。文章特别提到 <详情>