IT问答网为您找到相关结果约19个
  • 刚从一家公司面试回来,我勒个去。从2点开始一直到5点40。 做Hadoop的。 主要是用Map reduce来进行超大日志分析。 第一轮:问了问JVM垃圾回收原理,无向图怎么判断任意2个节点是否关联(手写代码),并归排序(Merge Sort)的分析(手写代码),给你一个超级大的文件,里面...
    hadoop - 提问人:Grrrr - 15个回答 - 提问时间: 1970/01/01 08:00
  • 1.    计算机基础知识扎实、善于沟通、理解能力强 2.    有Hadoop或Hbase开发经验,熟悉Map/Reduce编程 3.    熟悉Linux环境下的Java编程,对coding保持浓厚兴趣 4.    热爱探索和钻研,参与过开...
    hadoop - 提问人:李勇会 - 5个回答 - 提问时间: 1970/01/01 08:00
  • 最近在摸索着做统计系统,不知道具体的流程是怎样的  希望大家可以指点.. 需求:通过分析hadoop中的用户数据   快速的查询出某个随机时段中用户的某一操作的次数,需要精确到单个用户 不知道如何做到快速的查询? ...
    hadoop - 提问人:思维忒 - 5个回答 - 提问时间: 1970/01/01 08:00
  • 高级hadoop开发工程师 工作职责 1、负责hadoop方向开发; 2、解决海量数据不断增长面临的挑战,大数据量的分析。 职位要求: 1、计算机或相关专业本科或以上学历 2、2年以上Java 研发经验 3、有hadoop相关经验 优先考虑 4、熟练编写shell或perl或python 脚本...
    hadoop - 提问人:blair - 4个回答 - 提问时间: 1970/01/01 08:00
  • Apache Hadoop 和商业智能 不管您拥有什么样的业务,理解您的客户以及他们如何与您的软件交互的重要性无论如何强调都不过分。对于创业公司或年轻公司,您需要理解什么有 效,什么无效,以便迅速重复并响应客户。这对于历史更长的公司同样适用,尽管对他们而言,调优业...
    hadoop - 提问人:IBM/DW - 2个回答 - 提问时间: 1970/01/01 08:00
  •   如图,map 完成后, 等了将近40分钟,而且前面的reduce(11%)好慢,但是后面花括号部分的就正常了, 不知怎么办,求教???? 有combiner ……会不会是combiner 花了太长时间
    hadoop - 提问人:maoyaozong - 2个回答 - 提问时间: 1970/01/01 08:00
  • Apache Pig 是一个高级过程语言,适合于使用 Hadoop 和 MapReduce 平台来查询大型半结构化数据集。通过允许对分布式数据集进行类似 SQL 的查询,Pig 可以简化 Hadoop 的使用。本文将探索 Pig 背后的语言,并在一个简单的 Hadoop 集群中发现其用途。 Hadoop 的普及...
    hadoop - 提问人:IBM/DW - 2个回答 - 提问时间: 1970/01/01 08:00
  • @红薯 你好,想跟你请教个问题:如何在cloudify上面部署Hadoop,Hive,Pig等大数据处理软件?网上给出的recipes无法奏效啊!谢谢了!
    hadoop - 提问人:elite909 - 2个回答 - 提问时间: 1970/01/01 08:00
  • 谢谢 有图灵账号 说IBSN也可以 方便查找
    hadoop - 提问人:黑曜石 - 1个回答 - 提问时间: 1970/01/01 08:00
  • public static class PVMapper extends Mapper { public void map(Text key, Text value, org.apache.hadoop.mapreduce.Mapper.Context context) throws IOException, InterruptedException { } public static clas...
    hadoop - 提问人:许文强 - 1个回答 - 提问时间: 1970/01/01 08:00
  • 我的是在xp系统下3台连一起的,具体问题如下:hadoop@hdp8 /cygdrive/d/hadoop $ bin/hadoop dfs -put ./wordcount input(记得在ubuntu下。这步完成后有提示的,现在没有) hadoop@hdp8 /cygdrive/d/hadoop $ bin/hadoop jar hadoop-0.20.2-examples.jar wordcount in...
    hadoop - 提问人:江离 - 1个回答 - 提问时间: 1970/01/01 08:00
  • @逝水fox 你好,想跟你请教个问题:我是在windows xp上通过cygwin软件,运行hadoop的。。跟上次的问题一样,在你说的设置tmp文档后,任然不能执行任务。。提示的错误和上次相同  http://www.oschina.net/question/270821_62054.   我的hadoop、cygwin都安装...
    hadoop - 提问人:江离 - 1个回答 - 提问时间: 1970/01/01 08:00
  • 想做一个轻量级的mapreduce模拟器,用于预测某个mapreduce应用程序在hadoop上的运行时间(hadoop集群各种参数配置确定),请问有没有对mapreduce模拟有研究或者感兴趣的同志?
    hadoop - 提问人:曾林西 - 1个回答 - 提问时间: 1970/01/01 08:00
  • 如何对mapreduce 进行部署上线、监控(我本地开发好mapreduce程序如何部署到线上环境的、部署上去后如何启动的,通过命令行?,如何控制执行时间 因为日志是随时随地都产生的,mapreduce在跑的时候如何监控的)...
    hadoop - 提问人:肥皂 - 1个回答 - 提问时间: 1970/01/01 08:00
  •     Map端输出<1,1>,<1,2>,<1,3>(这些key、value都是BytesWritable类型的,在这里为了大家看得清楚,以int型展示),Reduce端接收的时Map端输出合并后的<1,<1,2,3>>,然后重点来了!     当我在Reduce端对<1,2,3>进行迭代时,...
    hadoop - 提问人:月毁星坠 - 1个回答 - 提问时间: 1970/01/01 08:00
  • 刚开始学习HBase,一直想不明白数据结构的设计思想。官方文档的分析看了一下午,还是不明白(智商是硬伤?) 1.create 'test','column1','column2' 这里的column1,column2是列族?还是列? 当创建表的时候是不是可以理解为创建了rowKey,time stamp,column1,col...
    hadoop - 提问人:快到马桶里来 - 1个回答 - 提问时间: 1970/01/01 08:00
  • 本人初学,在windows上利用cygwin搭建了hadoop(0.20.2版本)开发环境,而且执行了WorkCount,自己也写了一个Map/Reduce执行都没 有问题。之后尝试安装Hive,我用的0.7.1版本,按照网上给的一些手册,下载--解压--配置环境变量,然后show tables; 一路都没有遇到问题,可...
    hadoop - 提问人:王建奎Jerrick - 0个回答 - 提问时间: 1970/01/01 08:00
  • 小弟我做个简单的搜索引擎,用HBase数据库存放网页内容,但是当把网页内容提取出来进行分析时总是没有输出,因此我就直接把数据不分析直接输出到另外一个表中,倒是有输出了,因此我的分析算法没问题,但是输出很简单,我也不知道是什么意思!希望各位大神指点指点,问...
    hadoop - 提问人:duobi - 0个回答 - 提问时间: 1970/01/01 08:00
  • 随着企业开始同时利用云计算和大数据技术,现在应当考虑如何将这些工具结合使用。在这种情况下,企业将实现最佳的分析处理能力,同时利用私有云的快 速弹性 (rapid elasticity) 和单一租赁的特性。本文将帮助您了解云计算和大数据技术的组成部分,了解私有云是什么,Ap...
    hadoop - 提问人:IBM/DW - 0个回答 - 提问时间: 1970/01/01 08:00
 加载中...