大数据技术
NodeJS无所不能:细数10个令人惊讶的NodeJS开源项目
在几年的时间里,NodeJS逐渐发展成一个成熟的开发平台,吸引了许多开发者。有许多大型高流量网站都采用NodeJS进行开发,像PayPal,此外,开发人员还可以使用它来开发一些快速移动Web框架。 除了Web应用外,NodeJS也 ...
分类: 大数据技术
阅读全文
大数据时代与时间同步技术
“大数据”严然已经成为当下最为火热的IT行业的词汇之一,它伴随着“云时代”的到来而显得更加重要。 从定义上讲,大数据(bigdata),或称巨量资料,指的是所涉及的资料数据规模巨大到无法透过目前主流软件工具 ...
分类: 大数据技术
阅读全文
大数据对于数据中心基础设施意味着什么
今天,我们可以从各种各样的渠道来源收集和存储数据,如网上交易、社交媒体活动、移动设备和自动化传感器等等。而软件的发展始终为新硬件的改进铺平 了道路。在这种情况下,大数据的计算和存储需求无疑正推动着存储 ...
分类: 大数据技术
阅读全文
数据仓库之门向Hadoop开启
在大数据时代,Hadoop分布式处理架构为IT、数据管理以及数据分析团队带来了新生机的同时,也带来了新的挑战。随着Hadoop生态系统的不断发展壮大,企业需要对快速更新换代的技术做好充足的准备。 上周,Apache软件 ...
分类: 大数据技术
阅读全文
技术、市场、环境,3个维度对比中美云计算产业
云计算在美国已经基本普及了,而中国的云计算产业仍是呼之欲出,却仍迟迟不出,个中缘由众说纷纭。众所周知的原因,全世界的互联网基本可以分成两个独立的空间和市场:一个是美国主导的全球互联网,另一个是中国自主 ...
分类: 云技术
阅读全文
电商数据挖掘之关联算法(一)
关联,其实很简单,就是几个东西或者事件是经常同时出现的,“啤酒+尿布”就是非常典型的两个关联商品。所谓关联,反映的是一个事件和其他事件之间依赖或关联的知识。当我们查找英文文献的时候,可以发现有两个英文 ...
分类: 数据挖掘
阅读全文
“云中漫步” 天融信安全云初探
近期众多的安全厂商都打出“安全云”的牌,究竟“安全云”是什么?是科技进步的成果,还是厂家无良的炒做?带着这些问题我们首先来看“安全云”是什么。 “安全云”的概念 安全云是将云计算技术和业务模式应 ...
分类: 云技术
阅读全文
什么是结构化数据?什么是半结构化数据?
概述相对于结构化数据(即行数据,存储在数据库里,可以用二维表结构来逻辑表达实现的数据)而言,不方便用数据库二维逻辑表来表现的数据即称为非结构化数据,包括所有格式的办公文档、文本、图片、XML、HTML、各类 ...
分类: 大数据技术
阅读全文
大数据已经成为京东参与竞争的利器
过去几年,京东高速发展,用户数超过了1亿,日PV量达到两亿,SKU(保存库存控制的最小可用单位)接近千万,自建了遍布全国的物流体系,向用户提供了各种各样的特色配送服务。在快速发展的过程中,大数据已经成为京东 ...
分类: 大数据技术
阅读全文
一张图测试你的Hadoop能力-Hadoop能力测试图谱
1.引言看到一张图,关于Hadoop技术框架的图,基本上涉及到Hadoop当前应用的主要领域,感觉可以作为测试Hadoop开发人员当前能力和水平的比较好的一个工具,特此分享给大家。如果你能够明白说出每一个技术框架的功能、 ...
分类: 大数据技术
阅读全文
跨机房的hadoop集群
这是来自于阿里技术嘉年华的一个分享,因为在百度也考虑过类似的事情,所以听得比较有感悟,这里把相关内容整理一下。 首先尊重版权,还是把原链接和作者贴上: http://adc.alibabatech.org/carnival/history/ ...
分类: 大数据技术
阅读全文
从开源告诉你身边的IT故事
最近我们Team利用Dream分布式计算平台,做了这样一件事情,将Github的大量数据通过爬虫抓取下来,通过分析后,我们抽取最近一年中部分的开发者和项目信息,得到了如下有趣的信息,故分享之,数据原汁原味,无人工干 ...
分类: 大数据技术
阅读全文
戴尔流动数据架构 感受大数据流动之魅
业务的发展日新月异,用户所需管理的数据容量、速率和价值也在持续加速地提升。真正不变的唯有“变化”,不过这一点也使得IT人员有一种永无休止的不确定 感。然而,缺乏动态性的传统存储往往太过死板、极难管理,且 ...
分类: 大数据技术
阅读全文
东风日产:搭建大数据营销高速公路
长期以来,营销战场上充斥着激烈的广告战、价格战,以及渠道的重复建设。在互联网时代,面对高度分散的传播渠道和顾客群,这一切都走入了死胡同。 东风日产利用大数据搭建了一个精细化营销的高速公路,2012年为企 ...