map-reduce

map-reduce精品文章

• 

  托管Hadoop集群-故障排查 UHadoop

  ...点遇到性能问题，整个群集都会受到影响。 - core：处理 map-reduce 任务,保持 Hadoop 分布式文件系统 (HDFS),hbase的regionserver。 - task：处理 map-reduce 任务。这些纯粹是计算资源，并不存储数据。您可以向群集添加任务节点，提高性能速...

  ernest.wang 2022-07-12 17:43 评论0 收藏2025
• 

  新书《全栈数据之门》完整目录

  ...，实战经验 01 排序与分布式 02 多表插入与mapjoin 03 加载map-reduce 脚本 04 使用第三方UDF 05 实战经验 06 生成唯一ID 0x35　HBase 库，实时业务 01 理论基础 02 Shell 操作 03 关联Hive 表 04 数据导入 05 实用经验 0x36　SQL 与NoSQL，Sqoop 为媒 ...

  yibinnn 2019-07-25 11:40 评论0 收藏0
• 

  当我们在说“并发、多线程”，说的是什么？

  ...一组执行器进行结果汇总的处理方式就是现在非常流行的map-reduce方法了。这种方法在大数据或者程序语言标准库里都有大量的应用，比如大数据领域赫赫有名的Hadoop和Java语言中的ForkJoinPool都使用了这种思想。 回顾 在这篇文章...

  sf_wangchong 2019-08-16 15:31 评论0 收藏0
• 

  什么是大数据

  ...源的Hadoop的出现极大的降低了它的门槛。2、Mapreduce原理Map-Reduce的处理过程主要涉及以下四个部分：•Client进程：用于提交Map-reduce任务job；•JobTracker进程：其为一个Java进程，其main class为JobTracker；•TaskTracker进程：其为一个Java...

  learn_shifeng 2019-08-16 13:40 评论0 收藏0
• 

  「译」 MapReduce in MongoDB

  ...时很可能得不到你想要的结果。 从 mongodb.org 上的解析： Map-reduce 是一种数据处理范例，用于将大量的数据变成有用的聚合结果。 对于 map-reduce 操作，MongoDB 提供了 mapReduce 的数据库命令。 在这非常简单的术语里面，mapReduce 命令...

  ConardLi 2019-06-26 17:02 评论0 收藏0
• 

  一篇文章入门MongoDB

  ...命令基于Javascript语法 对数据之间关系的支持比较弱 支持map-reduce的运算框架 支持GirdFS的分布式文件系统 MongoDB持久化 MongoDB虽然是内存数据库，但是它主要是将数据存储在硬盘的，所有要操作的数据通过mmap的方式映射到内存某...

  felix0913 2019-06-26 17:56 评论0 收藏0