- 博客(98)
- 收藏
- 关注
RSS订阅原创 Hadoop 之 MapReduce 的工作原理及其倒排索引的建立_map倒排索引实现原理
Reduce端排序及输出结果下面看怎么用Java来实现WordCount单词计数的功能首先看Map过程Map过程需要继承org.apache.hadoop.mapreduce.Mapper包中 Mapper 类，并重写其map方法。
2024-05-17 07:46:06
698
原创 Hadoop 之 MapReduce 的工作原理及其倒排索引的建立_map倒排索引实现原理(3)
(img-oIQA0gKb-1715903106846)](img-Y7j5UdeR-1715903106846)]* @author 汤高。
2024-05-17 07:45:31
793
原创 Hadoop 之 MapReduce 的工作原理及其倒排索引的建立_map倒排索引实现原理(2)
下面通过一个单词计数案例来理解各个过程1）将文件拆分成splits(片)，并将每个split按行分割形成对，如图所示。这一步由MapReduce框架自动完成，其中偏移量即key值分割过程将分割好的对交给用户定义的map方法进行处理，生成新的对，如下图所示。执行map方法。
2024-05-17 07:44:56
834
原创 Hadoop 之 MapReduce 的工作原理及其倒排索引的建立_map倒排索引实现原理(1)
（2） 运行各类任务的Container：这是由ApplicationMaster向ResourceManager申请的，并由ApplicationMaster与NodeManager通信以启动之。以上两类Container可能在任意节点上，它们的位置通常而言是随机的，即ApplicationMaster可能与它管理的任务运行在一个节点上。下面通过一个单词计数案例来理解各个过程1）将文件拆分成splits(片)，并将每个split按行分割形成对，如图所示。
2024-05-17 07:44:20
657
原创 Go最新【LeetCode刷题日记】382(4)，12道Golang高级面试题
/ getRandom() 方法应随机返回 1、2、3中的一个，每个元素被返回的概率相等。至多调用 getRandom 方法 104 次。链表中的节点数在范围 [1, 104] 内。你能否在不使用额外空间的情况下解决此问题？如果链表非常大且长度未知，该怎么处理？
2024-05-17 03:59:01
360
原创 Go最新【LeetCode刷题日记】382(3)，2024年最新2024谈一下当下最合适的Golang架构
我们可以在初始化时，用一个数组记录链表中的所有元素，这样随机选择链表的一个节点，就变成在数组中随机选择一个元素。来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新**
2024-05-17 03:58:26
370
原创 Go最新【JVM】内存的分配策略_内存分配策略，熬夜整理华为最新Golang笔试题
总的来说，内存分配规则并不是一层不变的，其细节取决于当前使用的是哪一种垃圾收集器组合，还有虚拟机中与内存相关的参数的设置。的Java对象，典型的就是那种很长的字符串以及数组。大对象对虚拟机的内存分配来说就是一个坏消息（更坏的就是遇到一群朝生夕灭的短命大对象，我们应该避免），经常出现大对象容易导致内存还有不少空间时就。，对象在Eden区出生并且经过第一次Minor GC后仍然存活，进入Survivor区，对象年龄设为1，之后每经过一次Minor GC，年龄加1，直到达到阈值（默认15），就会晋升到老年代。
2024-05-17 03:57:15
494
原创 2024年Go最全Golang面试题整理(1)，五年Golang开发者小米、阿里面经
比如说，当CPU的某个内核Core加载某一个数据到Cache1里时，这个缓存行的状态就是独占状态，然后内核对数据做了修改，这里缓存行的状态就是修改状态。传递指针可以减少底层值的拷贝，可以提高效率，但是如果拷贝的数据量小，由于指针传递会产生逃逸，可能会使用堆，也可能会增加GC的负担，所以传递指针不一定是高效的。MESI缓存一致性协议，每个缓存行都用2个bit表示四种状态，修改状态Modified，独占状态Exclusive，共享状态Shared，失效状态Invalid。其中，LRQ 不加锁，GRQ加锁。
2024-05-17 00:11:51
1063
原创 2024年Go最全Golang面试宝典——Go语言基本数据类型转换_golang 面试宝典，2024年最新2024最新百度、头条等公司Golang面试题目
Google是Go语言诞生的地方，其他公司如Facebook、腾讯、阿里、字节跳动、百度、京东、小米等都在拥抱和转向Go。注意：在转换过程中，如果存在数值溢出(如int64的128转成int8)，编译时不会报错，但是转换的结果按照溢出处理，和我们希望的结果不一样，因此在转换时，需要考虑数值范围。fmt包中的Sprintf方法可以根据format参数生成格式化的字符串并返回该字符串，详细使用说明见：https://golang.google.cn/pkg/fmt/
2024-05-17 00:11:17
380
原创 2024年Go最全golang超详细基础入门教程_golang教程，2024年最新一线互联网公司面经总结
在Go语言中，可以使用关键字var来定义变量，并使用赋值运算符对变量进行赋值。在上面的语句中，var关键字用于声明一个变量，age是变量的名称，int是变量的类型，是赋值运算符，将10赋给变量age。在上面的语句中，变量name的类型会被自动推导为字符串类型，并将字符串"Alice"赋值给变量name。age := 20在上面的语句中，:=是简短赋值运算符，表示将20赋值给新声明的变量age。由于没有明确指定变量的类型，因此编译器会根据右侧表达式的值来自动推导变量的类型。
2024-05-17 00:10:42
801
原创 2024年Go最全Golang监控(Telegraf + InfluxDB + Grafana)(1)，让人茅塞顿开
/ 第二个参数是statsd客户端前缀，这里我们不要前缀，直接设为""// 第四个参数是数据包最大达到多少时，就发送，这里设为512字节。netstat -naup|grep 8125 #确认端口已监听。// 第三个参数是发送数据包的最大时间间隔，这里设为300毫秒。// 第一个参数是连接地址，
2024-05-17 00:10:06
364
原创 Go最新ChatGPT写POC，拿下漏洞！_goby poc分享(2)，2024年最新最新Golang笔试题分享
在使用 ChatGPT 将相应漏洞的 EXP 代码转换之前，先演示一下原始 Python 代码的执行效果，具体如下：开始转化格式：此外，他还提供了该程序的使用方法。然而，每次 ChatGPT 的回答都可能不完全相同。
2024-05-16 12:28:39
409
原创 Go最新CentOS编译-安装-部署Redis(2)，2024年最新带你玩转自定义view系列
这里获取](https://bbs.csdn.net/topics/618658159)**配置完环境变量后, 可以在任何目录使用redis命令。
2024-05-16 12:28:06
340
原创 Go最新CAJViewer8(2)，2024年最新Golang面试题集锦在这里
网络安全行业产业以来，随即新增加了几十个网络安全行业岗位︰网络安全专家、网络安全分析师、安全咨询师、网络安全工程师、安全架构师、安全运维工程师、渗透工程师、信息安全管理员、数据安全工程师、网络安全运营工程师、网络安全应急响应工程师、数据鉴定师、网络安全产品经理、网络安全服务工程师、网络安全培训师、网络安全审计员、威胁情报分析工程师、灾难恢复专业人员、实战攻防专业人员…网上虽然也有很多的学习资源，但基本上都残缺不全的，这是我自己录的网安视频教程，上面路线图的每一个知识点，我都有配套的视频讲解。
2024-05-16 12:27:32
250
原创 Go最全【go】克隆git仓库到最后一次提交的分支、用AccessToken拉取，Golang常见面试题
SingleBranch: true, //只拉取一个分支。fmt.Println(“克隆失败：”, err)fmt.Println(“克隆成功”)//gitPath为本地克隆目标位置。// 用AccessToken拉取。// 用用户名和密码拉取。
2024-05-16 08:58:07
482
原创 Go最全【Golang】案例为基浅谈Go的变量与常量_1(1)，2024年最新10天拿到字节跳动Golang岗位offer
在上一篇文章中，博主对于Go语言中的一些基本语法与变量的初步定义做了初步介绍。在这篇文章主要是对于变量的进一步应用，以及对于Go语言中常量的介绍。那么我们就看以下内容！文章目录🍒前言@[toc]1.变量交换2.匿名变量2.1.如何理解这个匿名变量的使用场景？3.关于作用域3.1.局部变量3.2.全局变量3.3.形式参数4.关于常量4.1.常量的使用4.2.常量使用的细节4.3.iota常量生成器5.关于源码🍊写在结尾。
2024-05-16 08:57:34
270
原创 Go最全【Golang】来用GoLand开发第一个Go程序_goland创建一个go项目(1)，2024年最新收割快手,字节,百度,美团的Offer之旅
不同的人对于开发工具的习惯还是不一样的，所以博主还是决定，简单出一份关于GoLand的使用教程，方便于在开发过程中不同的开发习惯。但是在此还是希望如果是刚刚入门的小白们，要明白的一点是无论是编程语言还是编程工具，他们都应该是处于一个可切换的状态，并不是一门语言和一个IDE工具就阻挡下你的脚步，加油！
2024-05-16 08:57:01
944
原创 Go最全【Docker】golang操作容器使用rename动态更新容器的名字，Golang入门基础
今天遇到一个新的需求，要动态改变运行中的容器名字。可以考虑所以这种方法是。
2024-05-16 08:56:28
269
原创 GooglePlay强推的Appbundle究竟是什么？aab？不优化代码直接减少安装包大小(1)
Android Studio 中构建一个应用束 (app bundle)，就可以将应用所需的全部内容 (适用于所有设备) 都涵盖在内：所有语言、所有设备屏幕大小、所有硬件架构。接着，在用户下载您的应用时，Google Play 的新动态交付只会传输适用于用户设备的代码和资源。人们在 Play Store 上看到的安装包体积更小，下载速度也越快，同时也节省了设备存储空间。
2024-05-16 05:22:33
388
原创 Google Chrome RCE漏洞 CVE-2020-6507 和 CVE-2024-0517 流程分析
/ 将低位整数写入 rwarr[5]// 将高位整数写入 rwarr[4]// 设置 backingStore 函数，用于将两个 32 位整数写入数组 rwarr 中的浮点数元素。// 将泄漏的 WebAssembly 实例地址和 base 写入 backingStore 中。// 从 DataView 中获取地址指向的浮点数，即 WebAssembly 的代码入口地址。// 根据偏移地址确定 base 指向的是数组 rwarr 中的哪个元素。// hi: 要写入的高位整数，low: 要写入的低位整数。
2024-05-16 05:22:00
910
原创 Google Chrome RCE漏洞 CVE-2020-6507 和 CVE-2024-0517 流程分析(1)
/ 将低位整数写入 rwarr[5]// 将高位整数写入 rwarr[4]// 设置 backingStore 函数，用于将两个 32 位整数写入数组 rwarr 中的浮点数元素。// 将泄漏的 WebAssembly 实例地址和 base 写入 backingStore 中。// 从 DataView 中获取地址指向的浮点数，即 WebAssembly 的代码入口地址。// 根据偏移地址确定 base 指向的是数组 rwarr 中的哪个元素。// hi: 要写入的高位整数，low: 要写入的低位整数。
2024-05-16 05:21:27
577
原创 Golong~最新Windows下Go环境+Go mod搭建, 介绍GOROOT、GOPATH、GOPROXY之间关系
在安装完Golang语言的时候，所谓的安装路径其实就是你的GOROOT路径，也就是说GOROOT存放的Golang语言内建的程式库的所在位置，而通常你安装完后，你电脑的环境变数就会设好GOROOT路径，当你开发Golang程式的时候，当你import内建的程式库的时候，并不需要额外安装，而当程式运行后，预设也会先去GOROOT路径下寻找相对应的程式库来运行。GO111MODULE=on，模块支持，go命令行会使用modules，而一点也不会去GOPATH目录下查找。后续使用go mod的时候速度较友好.
2024-05-16 05:20:53
1052
原创 2024年聊聊土木工程转行都去干啥了！(1)，2024年最新值得收藏
网络安全行业产业以来，随即新增加了几十个网络安全行业岗位︰网络安全专家、网络安全分析师、安全咨询师、网络安全工程师、安全架构师、安全运维工程师、渗透工程师、信息安全管理员、数据安全工程师、网络安全运营工程师、网络安全应急响应工程师、数据鉴定师、网络安全产品经理、网络安全服务工程师、网络安全培训师、网络安全审计员、威胁情报分析工程师、灾难恢复专业人员、实战攻防专业人员…网上虽然也有很多的学习资源，但基本上都残缺不全的，这是我自己录的网安视频教程，上面路线图的每一个知识点，我都有配套的视频讲解。
2024-05-16 01:47:41
526
原创 2024年聊一聊我做过的副业(2)，阿里P8大牛亲自教你
漏洞挖掘是指通过分析软件、系统或网络中存在的安全漏洞来发现并利用这些漏洞。漏洞挖掘是信息安全领域的一项重要工作，可以帮助企业和组织提高系统的安全性，避免黑客攻击和数据泄露。漏洞挖掘的过程包括信息收集、漏洞分析、漏洞利用等步骤。其中，信息收集是漏洞挖掘的第一步，通过对目标系统的信息进行收集，可以为后续的漏洞分析和利用提供必要的信息。漏洞分析是漏洞挖掘的核心步骤，通过对目标系统的漏洞进行分析，可以确定漏洞的类型、位置和影响范围等信息。漏洞利用是漏洞挖掘的最终目的，通过利用漏洞可以实现对目标系统的攻击和控制。
2024-05-16 01:47:08
575
原创 2024年聊一聊SQL注入常用绕WAF小技巧_sol注入常见的过waf方法(1)，2024年最新十年Golang编程开发生涯
在日常SQL注入中被拦截了不要慌，多种尝试，WAF机制检测什么，拦截什么我们一一列举出来，然后按照不同的函数进行替换与变形，特别注意的是要记录好闭合方式，注入类别等信息，这可以帮助我们快速分析注入，最后收集waf检测的一些简单规则去进行绕过，不同场景的waf都有着不同的检测机制，但是我们方法和逻辑思维还是不变的，需要我们根据实际渗透环境利用以上的小技巧进行变形从而进行注入。对waf过滤的函数或者单词进行重写，检测完毕后去除危险函数后还会保留某些字符进行重新组合。**5、变换编码**
2024-05-16 01:46:35
747
原创 2024年网页知识基础(新手搭建个人网站)_个人网页新手(1)，2024年最新全套教学资料
所以其实通过上面我们可以看出，如果只是要搭建一个静态网页，那么其实相比动态网页会简单很多，我们只需要掌握基础的html，css，JavaScript就可以做出一个功能稍微多一点的网页啦。项目文件结构非常简单，包括一个index.html，一个js和一个css文件，当然还包括一些图片。因为网站是静态的，所以不需要PHP，不需要数据库，因此静态网页非常适合用来搭建个人的网站。这里我以一个大佬做的网页文件，放进我服务器里去看看会怎样。而且网页的内容也很简单，只有一个文件，也没有复杂的功能。
2024-05-16 01:46:02
212
原创 2024年最新代码是如何控制硬件的？，2024年最新2024Golang进阶新篇章
然后数据（前面提到过，它也是用三极管/场效应管的导通与否“记忆”的）利用类似的机制，被送入这个被“指令”激活的电路——这些电路是工程师们利用最最基础的三极管控制原理，用一大堆三极管组合出来的：当数据（某种高低电平的组合）经过这些电路后，就会变成另外一组高低电平的组合：这个组合刚好和“指令”代表的功能所应该给出的结果一致。同时，计算机就是一堆开关；首先，我写的这段代码会在一个软件里运行，这个软件会编译我的代码形成枯燥难懂但是70年代时会被人认为高大上的汇编语言，类似下图这样的（除绿色字部分，解释用的）：；
2024-05-15 12:49:52
335
原创 2024年最新代理模型优化算法_高斯克里金模型，2024年最新2024我对Golang-view的3条认识
根据这些点的“代理值”以及它们与目标函数已知的点之间的距离，来估计一个优值函数（merit function）。（4）在职点（Incumbent point）：在最近的一次“代理重置”后，目标函数值最小的点。（1）构造代理阶段：首先在边界范围内，创建数个随机的点（较少），并在这些点上计算目标函数。优值函数是一个同时关联代理和已搜索值的距离的函数，以平衡“最小化代理”和“搜索空间（广泛度）”两个任务。（2）代理函数（Surrogate function，“S”）：目标函数的“代理”，化繁为简。
2024-05-15 12:49:19
422
原创 2024年最新他喵的，Google大佬的这份LeetCode刷题笔记太强了(2)，2024年最新Golang的Io模型你了解多少
这份笔记不仅排版十分精美，内容也异常充实，每一题都是细致的讲解，有时候还会配上图片，就怕你搞不懂，大大的良心啊！，这一点非常难能可贵！也就是说，这份刷题笔记中的解答都是大厂考核时候的标准答案，如果说你吃透了这份刷题笔记，可以吊打面试官了——当然了，吃透会比较难，但如果能应付面试，就直了呀，不不不，就值了呀！以前呢，我也很讨厌刷题，觉得这就像古代的八股文一样，又臭又刻板，但互联网的公司都喜欢这么考，因为确实也找不到更好的替代方案，那如果你不准备不去刷 LeetCode 的话，面试必定挂啊！
2024-05-15 12:48:46
424
原创 2024年最新DFS应用——遍历有向图+判断有向图是否有圈_dfs遍历有环图(2)，字节跳动今日学习内容
笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新**
2024-05-15 09:20:33
402
原创 2024年最新DDS（data distribution service，数据分发服务）简介(2)，超全Golang中高级面试复习大纲
DDS中间件全面负责数据的分发（从生产者到消费者），以及数据的管理（例如为后期加入的应用程序维护非易失性（non-volatile）数据）。提供用于DDS服务质量（Qos），DDS数据类型和DDS实体（DomainParticipant，主题，发布者，订阅者，DataWriters和DataReaders）的XSD架构文件。为DDS服务质量（Qos），DDS数据类型，DDS数据和DDS实体（域参与者，主题，发布者，订阅者，DataWriters和DataReaders）提供JSON模式文件。
2024-05-15 09:20:01
261
原创 2024年最新CV什么时候能迎来ChatGPT时刻？(3)，字节跳动今日学习内容
下面我就带着有偏的NLP视角，分享一下这三篇工作在统一CV上的尝试，欢迎大家在留言区交流，也欢迎推荐其他有insight的工作。
2024-05-15 09:19:28
359
原创 2024年最新CTF的一些常用工具_ctf工具包(3)，2024年最新Golang社招面经分享
内容概要：包括 内网、操作系统、协议、渗透测试、安服、漏洞、注入、XSS、CSRF、SSRF、文件上传、文件下载、文件包含、XXE、逻辑漏洞、工具、SQLmap、NMAP、BP、MSF…反序列化的考点也是比较刁钻的，很多人都是比较头疼的，包括现在的我见到反序列见到代码就恶心，这边列几个文章都是我学习反序列感觉比较好的文章！网上虽然也有很多的学习资源，但基本上都残缺不全的，这是我自己录的网安视频教程，上面路线图的每一个知识点，我都有配套的视频讲解。
2024-05-15 09:18:55
271
原创 2024年最全【池化技术】池化技术基础和原理(3)，2024年最新万字长文轻松彻底入门Flutter
池化技术简单点来说，就是提前保存大量的资源，以备不时之需。池化技术有两个特点，提前创建和重复利用。
2024-05-15 05:43:28
886
原创 2024年最全【杂谈】protobuf详解，2024年最新做了6年Golang开发
我们在日常开发过程中进行网络通信和数据交换等应用场景中经常使用的技术是json或xml，最近接触了Google的Protobuf。在查阅相关资料学习 ProtoBuf 以及研读其源码之后，发现其在效率、兼容性等方面非常出色。在以后的项目技术选型中，尤其是网络通信、通用数据交换等场景应该会优先选择 ProtoBuf。下面详细的看下protobuf相关的内容protobuf(protocol buffer) 是谷歌内部的混合语言数据标准。
2024-05-15 05:42:56
521
原创 2024年最全【数据结构】平衡二叉树的插入、删除_平衡二叉树插入怎么插(4)，2024年最新Golang高分面试指南
处理完成后，2节点变成了1，3的父节点，此时2节点的高度和没插入节点2之前3节点高度一样，于是告诉父节点4，我没有长高，此时递归结束。），k1就没有右结点为LH。开始时，k2节点左孩子是小x,整棵树还是平衡树，然后在小x的子节点插入一个数，小x变成大X，此时大X高度为2，k1节点不平衡，为使树恢复平衡，我们把k2变成这棵树的根节点，因为k2大于k1，把k1置于k2的右子树上，而原本在k2右子树的Y大于k1，小于k2，就把Y置于k1的左子树上，这样既满足了二叉查找树的性质，又满足了平衡二叉树的性质。
2024-05-15 05:42:22
636
原创 2024年最全【VxWorks5(6)，腾讯+华为+阿里面试真题分享
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以添加戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！02b,22sep92,rrr added support for c++02a,04jul92,jcf cleaned up.01k,26may92,
2024-05-15 05:41:49
887
原创 2024年Go最全【LeetCode刷题日记】树类题目常见题型_leetcode 树 题目，深入浅出Golang性能调优
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上Go语言开发知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新如果你需要这些资料，可以戳这里获取}class Solution {public:bool isSameTree(TreeNode* p, TreeNode* q) {if (p == nullptr && q == nullptr) {re
2024-05-15 02:05:10
940
原创 2024年Go最全【LeetCode刷题日记】[区域和检索 - 数组不可变]，2024年最新面试题+笔记+项目实战
最多调用 104 次 sumRange 方法。、大纲路线、讲解视频，并且后续会持续更新**
2024-05-15 02:04:37
266
原创 2024年Go最全【LeetCode刷题日记】[区域和检索 - 数组不可变](3)，经典好文
一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！时间复杂度：初始化 O(n)O(n)，每次检索 O(1)O(1)，其中 nn 是数组 \textit{nums}nums 的长度。初始化需要遍历数组 \textit{nums}nums 计算前缀和，时间复杂度是 O(n)O(n)。每次检索只需要得到两个下标处的前缀和，然后计算差值，时间复杂度是 O(1)O(1)。
2024-05-15 02:04:04
315
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人