正在加载图片...
mapreduce模型概述 应用程序至少应该指明输入输出的位置(路径),并通过实现合适的 接口或抽象类提供map和 Reduce函数。再加上其他作业的参数,就构 成了作业配置( job configuration)。然后,由 Hadoop的job- client提 交作业(jar包/可执行程序等)和配置信息给 JobTracker,后者负责 分发这些软件和配置信息给 slave、调度任务且监控它们的执行,同 时提供状态和诊断信息给 job-client 虽然 Hadoop框架是用Java实现的,但 Map-Reduce应用程序则不一 定要用Java来写。 《大数据技术基础》《大数据技术基础》 MapReduce模型概述 • 应用程序至少应该指明输入/输出的位置(路径),并通过实现合适的 接口或抽象类提供map和reduce函数。再加上其他作业的参数,就构 成了作业配置(job configuration)。然后,由Hadoop的job-client提 交作业(jar包/可执行程序等)和配置信息给JobTracker,后者负责 分发这些软件和配置信息给slave、调度任务且监控它们的执行,同 时提供状态和诊断信息给job-client。 • 虽然Hadoop框架是用Java实现的,但Map-Reduce应用程序则不一 定要用Java来写
<<向上翻页向下翻页>>
©2008-现在 cucdc.com 高等教育资讯网 版权所有