搜索
收藏本版 |订阅

Hadoop 今日: 0|主题: 220|排名: 12 

作者 回复/查看 最后发表
海量数据处理:十道面试题与十个海量数据处理方法总结
1、海量日志数据,提取出某日访问百度次数最多的那个IP。首先是这一天,并且是访问百度的日志中的IP取出来,逐个写入到一个大文件中。注意到IP是32位的,最多有个2^32个IP。同样可以采用映射的 ...
bigdata 2014-5-22 02603 bigdata 2014-5-22 15:07
hive并行执行job
用过oracle rac的应该都知道parallel的用途。并行执行的确可以大的加快任务的执行速率,但不会减少其占用的资源。在hive中也有并行执行的选项。 set hive.exec.parallel=true; //打开任务并 ...
bigdata 2014-5-23 02576 bigdata 2014-5-23 17:58
Hadoop集群部署模型纵览
VSphere Big Data Extensions(简称BDE)支持多种部署方式来构建Hadoop集群。按:   存储/计算绑定模型:将存储节点(Data Node)和计算节点(Task Tracker)部署在相同的虚拟机中。这 ...
admin_bigdatas 2013-10-30 01589 admin_bigdatas 2013-10-30 00:01
Hadoop Ubuntu下的安装
这个是在自己笔记本上的实验版本,在不熟悉的情况还是先考虑在自己的电脑上安装一个试验版本,然后再考虑安装部署生产环境中的机器。首先自己的电脑上需要安装一个虚拟机VMWare WorkStation, 安 ...
admin_bigdatas 2013-10-30 01646 admin_bigdatas 2013-10-30 00:01
深入Hadoop节点部署的策略
每个Hadoop集群都包括不止一个节点。这些节点可以按功能分成几个组,比如master组,worker组,client组等等。每个组里面的节点都有不同的资源要求,比如CPU,内存,存储。   在虚拟数 ...
admin_bigdatas 2013-10-30 01746 admin_bigdatas 2013-10-30 00:02
CCAH、CCA、CCP三门大数据培训资料 新人帖
CCAH Administrator Hadoop管理员认证认证准备建议:Hadoop管理员培训考试形式:90分钟;70%通过;60道多项选择题(会提示是单选or多选)CCA Spark and Hadoop Developer开发者认证认证准备 ...
MsBerry_f3i3n 2016-7-28 01971 MsBerry_f3i3n 2016-7-28 10:36
物联网需要开发者,那么开发者需要什么?
被认为是下一个风口的物联网领域,汇聚了众多的软硬件厂商加入这场竞争中来,Cisco、Dell、IBM、AT&T、Verizon、Oracle、Intel甚至GE都在进行布局,它们或推出自己的物联网系统,或合作组成联盟 ...
MEI 2014-11-7 01994 MEI 2014-11-7 17:16
2015年将大爆发的9类科技产品
随着 2014 年接近尾声,现在是时候审视科技业的轨迹,并预测哪些趋势将在 2015 年大爆发。来自市场研究公司 Gartner、IEEE 计算机协会、麻省理工学院以及其他机构的专家,评选出 9 类将在 2015 ...
idata 2014-11-7 01881 idata 2014-11-7 17:17
数据仓库之门向Hadoop开启
在大数据时代,Hadoop分布式处理架构为IT、数据管理以及数据分析团队带来了新生机的同时,也带来了新的挑战。随着Hadoop生态系统的不断发展壮大,企业需要对快速更新换代的技术做好充足 ...
爱智能 2013-11-5 04082 爱智能 2013-11-5 22:21
大数据时代特有商业模式—用户画像
站在21世纪互联网时代的风口浪尖,充分感受到了大数据的浪潮扑面而来。 目前市面上的大数据产品类型的框架基本上可以分为三类,包括大数据应用层产品,大数据管理层产品,大数据技术层产品。 ...
大讲台 2016-5-25 01381 大讲台 2016-5-25 18:40
海量数据处理:十道面试题与十个海量数据处理方法总结
1、海量日志数据,提取出某日访问百度次数最多的那个IP。 首先是这一天,并且是访问百度的日志中的IP取出来,逐个写入到一个大文件中。注意到IP是32位的,最多有个2^32个IP。同样可以采用 ...
bigdata 2014-5-26 02259 bigdata 2014-5-26 09:41
分享视频资料—Hadoop核心组件之zookeeper学习
课程简介 全面系统的讲解了zookeeper简介、特点、基本原理和应用场景。实战演练zookeeper安装部署的各个步骤。深度分析zookeeper API的实现原理。 学习目标 通过本视频的系统学习,你一定能够 ...
大讲台 2016-5-26 01296 大讲台 2016-5-26 11:40
Facebook针对hbase的优化方案分析
使用hbase的目的是为了海量数据的随机读写,但是在实际使用中却发现针对随机读的优化和gc是一个很大的问题,而且hbase的数据是存储在Hdfs,而Hdfs是面向流失数据访问进行设计的,就难免 ...
bigdata 2014-5-27 02850 bigdata 2014-5-27 09:16
大数据技术经验交流 SAAS平台孵化
可视化数据指导,让每一个人看懂大数据;多场景数据算法,让所有数据都有迹可循;大数据技术经验交流群,洞悉行业数据,引领未来方向,快来加入我们吧!(QQ群号257449299) ...
linb123456 2017-6-2 01406 linb123456 2017-6-2 10:30
华盛艺龙
华盛艺龍简介 华盛艺龍于2004年景破于云南龙陵,是一家以玉雕教学为依靠,产教联合为主导,专业从事玉石开采、研发、加工、销售、服务与珍藏 为一体的综合型现代化珠宝玉石企业,在业界取得 ...
xianpeng2s 2015-12-11 01080 xianpeng2s 2015-12-11 16:52
搭建Hadoop处理环境,零基础学习大数据 新人帖
由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知识介绍。 VMware ...
小P孩 2018-3-20 01764 小P孩 2018-3-20 12:29
大数据工程师值得一考的4个Hadoop认证 新人帖
1、CCA Administrator Exam (CCA131) 管理员认证 认证准备建议:Administrator管理员培训 考试形式:120分钟;70%通过;基于一个预配置的Cloudera企业版集群,解决8~12个场景下的任务 2、CCA ...
LEE88 2018-8-29 01666 LEE88 2018-8-29 11:47
关于Cloudera Hadoop认证改革
2016年1月1日起 Cloudera Hadoop课程及认证考试调整:CCDH的认证课程(Cloudera Apache Hadoop Developer Training)调整为CCA Spark and Hadoop Developer;CCSHB的认证课程(Cloudera Certif ...
IRENE 2015-12-14 01023 IRENE 2015-12-14 15:06
北京上海广州Cloudera Hadoop大数据培训:CCAH(管理员)、CCA(Spark and Hadoop) 新人帖
北京上海广州Cloudera Hadoop大数据培训:CCAH(管理员)、CCA(Spark and Hadoop)北京8月16-19日Cloudera Developer training for Spark and Hadoop(CCA-175)上海8月27-30日Cloudera Developer tr ...
Cloudera_vgqmP 2016-8-4 01027 Cloudera_vgqmP 2016-8-4 11:20
CDH——Cloudera Developer Training for Spark and hadoop
Cloudera Developer Training for Spark and hadoopCourse Time:2016年6月27-30日Course Location:上海市 浦东新区 张江高科 伯克利工程创新中心Contact us:400-679-6113QQ:1438118790 Cert ...
IRENE 2016-5-31 01377 IRENE 2016-5-31 16:32
下一页 »

快速发帖

还可输入 80 个字符
您需要登录后才可以发帖 登录 | 立即注册

本版积分规则

 
 
大数据行业交流
大数据行业交流
大数据求职招聘
大数据求职招聘
站长电话:
15010106923
微信联系:
hb-0310
站长邮箱:
ab12-120@163.com
大数据中国微信

QQ   

版权所有: Discuz! © 2001-2013 大数据.

GMT+8, 2024-5-5 03:49 , Processed in 0.056996 second(s), 13 queries .

返回顶部 返回版块