MAP操作执行过程

最新推荐文章于 2022-08-09 16:28:11 发布
最新推荐文章于 2022-08-09 16:28:11 发布
阅读量392 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013073869/article/details/109959000
版权

1.运行 voc2yolo4.py文件生成用来检测的txt文件，test.txt文件
在这里插入图片描述

2.运行get_gt_txt.py文件，获取ground_truth文件夹
在这里插入图片描述

3.运行get_dr_txt.py 文件 ，获取检测结果文件
在这里插入图片描述
4.将input文件夹拷贝到mAP_master中运行，就可以得到最终结果也就是output文件夹
在这里插入图片描述

_upupdowndown
关注
map端执行流程分析
UckyK的专栏
11-12 1316
Map端执行流程分析 1、每个输入分片会让一个map任务来执行处理，默认情况下，以HDFS的一个块的大小（默认64M）为一个分片，当然我们也可以设置块的大小。Map输出的结果会暂且放在一个环形内存缓冲区中（该缓冲区的大小默认为100M，由io.sort.mb属性控制），当该缓冲区快要溢出来时（默认的缓冲区大小的80%，由io.sort.spill.percent属
python3 map函数没有执行_详解Python map函数及Python map()函数的用法
weixin_31570865的博客
02-09 627
python 的 详解Python map函数及Python map()函数的用法python map函数map()函数map()是 Python 内置的高阶函数，它接收一个函数 f 和一个 list，并通过把函数 f 依次作用在 list 的每个元素上，得到一个新的 list 并返回。例如，对于list [1, 2, 3, 4, 5, 6, 7, 8, 9]如果希望把list的每个元素都作平方，...
Hadoop Internals - Anatomy of a MapReduce Job
Mac Track
06-18 910
In MapReduce, a YARN application is called a Job. The implementation of the Application Master provided by the MapReduce framework is called MRAppMaster. Timeline of a MapReduce Job This is the
hadoop2 作业执行过程之map过程
weixin_34308389的博客
03-03 141
在执行MAP任务之前，先了解一下它的容器和它容器的领导：container和nodemanager NodeManager NodeManager(NM)是YARN中每个节点上的代理，它管理Hadoop集群中的单个计算节点，包括与ResourceManager保持通信，监督Container的生命周期管理，监控每个Container的资源使用（内存、CPU等）情况，追踪节点健康状况，管...
Hadoop-MapReduce机制原理
weixin_44894162的博客
08-09 784
Hadoop MapReduce是一个分布式计算框架，用于轻松编写分布式应用程序，这些应用程序以可靠，容错的方式并行处理大型硬件集群（数千个节点）上的大量数据（多TB数据集）；一个最终完整版本的MR程序需要用户编写的代码和Hadoop自己实现的代码整合在一起才可以；其中用户负责map、reduce两个阶段的业务问题，Hadoop负责底层所有的技术问题；...
map流程
javaMylife的博客
12-21 637
LineRecordReader,Mapper,Context mapTask---->run-------->setup--------->while(context.nextKeyValue|LineRecordReader得到map方法需要的的key和value)-------->map-------->cleanup
SHIMAX_MAP6操作流程图
07-28
根据提供的信息，“SHIMAX_MAP6操作流程图”主要涉及了SHIMAX_MAP6系统中的关键元素及其工作流程。为了更好地理解这些元素的功能及其在系统中的作用，下面将对这些元素进行详细的解释。 ### 一、核心概念解析 ####...
rammap自动运行程序
02-15
RAMMap是一款强大的内存分析工具，由微软的 Sysinternals 团队开发，主要用于分析和理解操作系统的内存使用情况。这个工具能够帮助用户深入洞察系统内存的分配和使用，包括物理内存、分页文件以及系统缓存等。在标题...
js代码-js -- 实现同步map函数
07-16
总的来说，实现一个同步`map()`函数可以帮助我们在需要顺序执行任务的场景中更好地控制代码的执行流程。然而，使用时需谨慎，以免对性能造成负面影响。在实际开发中，应根据具体需求和场景选择合适的同步或异步处理...
19、Join操作map side join 和 reduce side join
最新发布
05-29
Reduce Side Join 是最常见的 Join 实现方式，它在 Reduce 阶段执行 Join 操作。Mapper 读取不同数据集，输出中将 Join 字段作为 Key。Shuffle 过程会确保相同 Key 的数据被分发到同一个 Reduce 节点进行处理。在 ...
map函数处理的<k1,v1>从HDFS文件中获取流程源码解析
后知后觉的it路
11-30 517
    0 引子：   mapreduce在执行任务的时候，是如何将外部文件进行切分，并将这些文件转换成&lt;k1,v1&gt;键值对方式的 （还记得 map-reduce基本概念和wordcount解析 文章中提到的&lt;k1,v1&gt;概念吗?）   一些总结性的话： a) recordreader + inputsplit是数据输入处理阶段非常重要的两个概念。 b...
MapReduce过程详解
lavimer
04-04 1693
Hadoop越来越火，围绕Hadoop的子项目更是增长迅速，光Apache官网上列出来的就十几个，但是万变不离其宗，大部分项目都是基于Hadoop Common。 MapReduce更是核心中的核心。那么到底什么是MapReduce，它具体是怎么工作的呢？ 关于它的原理，说简单也简单，随便画个图喷一下Map和Reduce两个阶段似乎就完了。但其实这里面还包含了很多的子阶段，尤其是Shuffle
map函数理解
weixin_44281416的博客
01-12 874
map()方法定义在JavaScript的Array中，它返回一个新的数组，数组中的元素为原始数组调用函数处理后的值。 map函数对空数组无效。 map函数不会改变原数组。 let echartData = [ { name: '工单类型一', finishNum: 23, unfinishNum: 33 }, { name: '工单类型二', finishNum: 10, unfinishNum: 19 }, { name: '工单类型三', finishNum: 40, u
Map 的遍历过程及应用实例
JACKIE的专栏
08-29 1300
附：对map的遍历方法 <br /><br />[//创建HashMap对象 <br />Map<Integer, String> hm=new HashMap<Integer, String>(); <br />//向Map中插入键/值对 <br />hm.put(10001,"Tom"); <br />hm.put(10003,"Jerry"); <br />hm.put(10002,"John"); <br />hm.put(10004,"Lili"); <br /><br />Set entrySe
Job的任务执行流程之Map阶段
xhh198781的专栏
03-26 6049
一个作业的JobSetup任务被一个TaskTracker节点成功执行并报告到JobTracker节点之后，JobTracker节点就会更新对应的作业的状态为RUNNING，之后，这个作业的真正Map任务就可以被JobTracker调度分配给合适的TaskTracker节点来执行了。虽然本文的重点是讲述作业的Map任务在Hadoop集群中的执行过程，但JobTracker节点调度一个作业的Map任
map函数的学习和使用
GRC
12-07 1273
学习的过程中，主要参考了Learning Perl和 http://blog.chinaunix.net/uid-9398085-id-2189657.html以及 http://www.cnblogs.com/itech/archive/2010/11/19/1881476.html 的博客。并表示感谢！ 它使用一个列表，并对每个元素以一个指定的代码块或者表达式进行求值运算，然后返回所有
MapReduce处理过程分析
wenpu_Di
11-24 477
Map阶段： 1. 使用job.setInputFormatClass(TextInputFormat)做为输入格式。注意输出应该符合自定义Map中定义的输出。 2. 调用job.setPartitionerClass(),对指定的key落在具体的分区 3. 每个分区内又调用job.setSortComparatorClass()设置的key比较函数类排序(如果没有
map/reduce 过程的认识
xiaoxin
02-07 241
      map/reduce 过程的认识         最初我一直简单的以为map的工作就是将数据打散，而reduce就是将map打散后的数据合并。虽然之前跑过wordcount的例子，但之前只是对输出reduce最终的结果感兴趣，对控制台打印的日志信息完全不懂。这几天我们团队在探索pagerank，才开始对map/reduce有了深一层的了解。当一个job提交后，后续具体的一系列分配...
java中的map集合顺序
xue2xue的博客
11-20 1315
最近开发，需要map中输出的顺序与添加的顺序一致，所以总结一下HashMap、TreeMap、LinkedHashMap。 Map用于存储键值对，键不可重复，值可重复，键重复后值会被替换。 三种类型什么情况下使用？ 一般情况下使用HashMap TreeMap中的数据会按照键排序，如果需要按自然顺序或自定义顺序遍历键，可用TreeMap LinkedHashMap输出...
移动MAP信令流程详解：关键功能与操作
移动MAP（Mobile Application Part）信令流程是一种专为移动通信网络设计的协议，用于在不同网络之间协调移动台（MS）的服务请求和服务状态。它主要关注移动台在不同位置区（LA，Location Area）间的漫游过程以及...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值