代码之家 › 专栏 › 技术社区 › Nils Schmidt

使用Java减少哪些库和/或平台使用

mapreduce cloud amazon-ec2 java

Nils Schmidt · 技术社区 · 14 年前

我在读和听一些关于 云计算 和 地图缩小 最近的技术。我正在考虑使用一些算法来获得该领域的实践经验,看看现在有什么可能。

我想做的是: 我想使用一些公共云平台(例如谷歌App Engine,谷歌地图缩减,Amazon ECS,Amazon Map Reduce),这些都是内置的地图缩减功能,或者如果没有内置支持,使用额外的地图减少Java LabBARE(例如Hadoop,HIVE),并实现/部署一些算法。

有没有人在这方面做过一些经验,并指出了一个好的起点?或者列举一些在实践中效果很好的组合?

事先谢谢!

2 回复 | 直到 13 年前

danben 14 年前

AmazonEC2有一些预捆绑的HadoopAMIS。见 Running Hadoop on Amazon EC2 作为一个教程。

尤其是, Cloudera 我们想到了分配——它也有猪和蜂巢。

Kaleb Brasee 14 年前

Apache Hadoop 是一个主要的开源Java分布式计算框架,它包括 MapReduce 基于原始Google MapReduce的子项目。

推荐文章

Shadi Alian · hadoop程序中的类型不匹配错误

6 年前

FlyingBurger · reduce函数包含操作

6 年前

Gyanendra Dwivedi · 在清管器v0.15中设置队列名称

6 年前

Parth Mittal · MPI和MapReduce之间有什么区别?[已关闭]

6 年前

FlyingBurger · 映射减少概念

6 年前

Sea Star · 如何确定map和reduce任务的数量?

6 年前

yzhan · Hadoop可写读字段EOFEException

6 年前

dakir08 · 在python中生成反向索引

6 年前

Aqsha Padyani · Cloudera MapReduce计数器getValue错误

6 年前

Gideok Seong · 显示读取java中mapreduce程序的CSV文件时出错

6 年前