- 博客(89)
- 资源 (709)
- 收藏
- 关注
原创 Yolov5如何训练自定义的数据集,以及使用GPU训练,涵盖报错解决
系列文章1、详细讲述Yolov5从下载、配置及如何使用GPU运行2、Labelimg标注自己的数据集,及如何划分训练集和验证集,应用于Yolov5上一篇文章中,已经介绍了该如何标注自己的数据集,以及该如何给他们分类,接下来的话,就是根据我们已经标注好的数据集来进行训练啦。将我们之前划分好的数据集放入项目中补充:通过文件夹将数据集复制放进去的,pycharm可以索引的更快,不然会卡很久。这个系列主要是想给自己一个记录,写在文档里也是写,发布博客也是写,前面几篇比较容易,后面会慢慢加深的。慢慢来吧。
2023-09-09 20:14:55 6820 1
原创 利用大模型反馈故障的解决方案
在原有的智能巡检事件报告中,给出的建议相对固定,不能全面地将所有可能涉及到的错误建议给出。结合利用大模型,可以针对性地对触发的告警错误给出建议,提高事件报告的可读性。出处。
2023-09-09 20:11:32 879
原创 【矩阵分解】PCA - 主成分分析中的数学原理
PCA主成分分析属于矩阵分解算法中的入门算法,通过分解特征矩阵来实现降维。前置知识:包括样本方差、协方差、协方差矩阵、散度矩阵的简单介绍特征值分解EVD和奇异值分解EVD的原理和流程分别基于EVD和SVD的PCA实现方法PCA的应用以及对一些应用或说明的补充。
2023-09-09 20:09:44 844
翻译 一些人工智能工具
利用这些创新的人工智能工具,在更短的时间内完成更多工作。随着技术的快速发展,很明显,许多行业的未来与先进技术解决方案的整合有很大关系。近年来,最令人兴奋和创新的发展之一是人工智能(AI)的出现。因此,它已成为希望简化工作流程和提高效率的企业和个人的一个基本工具。好吧,你们都知道ChatGPT,但还有更多类似的工具会让你大吃一惊。在这篇文章中,我们将探讨现有的一些最好的人工智能工具,并研究如何让它们为你工作。兴奋吗?让我们开始吧。
2023-06-16 21:47:30 844 1
翻译 迎战ChatGPT,这20种“金饭碗”工作最能打
未来的老师们可以合理使用AI让工作变得更高效,从而更多地帮助学生发掘理想、培养自学能力、增强各项素质,人文关怀型教师的岗位可能会增加。AI只能基于人类设定的目标对科学活动进行优化,例如英矽智能等“AI+制药”公司,正在用AI赋能新药研发的能力。原创型的故事是创造力的最高体现形式之一,尤其是那些伟大的虚构类作品,需要具备独到的见解、引人入胜的情节以及诗意的语言,这些都是难以复制的。心理医生、社工和婚姻咨询师这些职业都需要极强的沟通技巧、共情能力以及获取客户信任的能力,这些恰好是AI的弱项。
2023-06-16 21:21:01 180
原创 华为云GaussDB
为此,GaussDB构建了一站式的迁移自动化工具链,通过自动语法转换工具UGO、数据迁移工具DRS、流量回放建模工具等,让传统数据库更容易更平滑的迁移到GaussDB上,相比传统作业模式,应用改造成本降低90%以上。在高可用方面,GaussDB创新了存算分离架构,采用华为云底座存储硬件级、实时数据同步复制技术,并结合分布式强一致算法,实现了分布式架构下同城双集群、双活备份,可在突发状况下确保数据零丢失(RPO=0)。并在全球多家大型金融机构得到验证,可实现大机、小机的平滑迁移,支撑业务高效创新与可持续。
2023-06-16 21:17:37 152
原创 机器学习——识别足球和橄榄球
本次的程序设计主要内容是机器学习——识别足球和橄榄球,通过本次课程设计,我对机器学习有了进一步的认识与了解,但在编写运行代码的过程中,也经常会遇到报错,通过一次次的修正,代码的编写也更快了。我切身感受到,在学习python的过程中,实践尤其的重要,只有通过亲自操作,才会发现自己学习过程中的不足之处,这对于我学习python,非常的有帮助。
2023-06-16 21:16:54 1454
原创 全民AI计划:通过langchain给LLM接上落地的大腿
langchain是一个开源项目。这个项目在GitHub上已经有45.5K个Star了。此项目由一位叫hwchase17的国外小哥在2022年底发布。我有理由相信,。
2023-06-15 09:08:19 1110
翻译 models-OpenAI API系统快速入门
对于涉及分类的任务,您尝试查找最适合所选文本的标签,通常可以使用语义搜索从不同的模型中获得出色的性能。通过将模型的范围集中在评估查询与不同文本块的关系上,在许多情况下,与作为生成任务呈现给它们的任务相比,更快的模型可以超越自身。他们最擅长Python,精通十几种语言,包括JavaScript,Go,Perl,PHP,Ruby,Swift,TypeScript,SQL甚至Shell。达芬奇是最有能力的模型,而艾达是最快的。可以完成其他模型可以完成的任何任务,通常具有更高的质量、更长的输出和更好的指令遵循。
2023-06-15 09:08:10 221
原创 无人机上仅使用CPU实时运行Yolov5(OpenVINO实现)(下篇)
从上面的实验数据来看,yolov5的帧率随着i3,i5,i7的增加而增加,随着7代,8代,9代CPU的增加而增加,随着电脑主频1.1GHz,1.6GHz,2.4GHz增加而增加。上期中我们讲了Yolov5的前两节环境配置及简单运行,在本期中我们带来后面两节在不同处理器下的实验数据及如何训练自己的模型。为了查看Yolov5在不同设备上的延迟与效果,下面我们对Inter的i3、i5、i7三种处理器在同样的环境下做了实验。是自定义名称,我们这次标注的数据集仅有这2个类别。两个文件夹之后,我们就可以训练。
2023-06-15 09:06:45 1810
原创 无人机上仅使用CPU实时运行Yolov5(OpenVINO实现)(上篇)
上面的环境部署到此结束,也欢迎关注开源自主无人机项目“Prometheus”,在此附上链接 “https://github.com/amov-lab/Prometheus.git”。但是,Intel OpenVINO的推出允许NUC平台实时运行深度学习模型,如目前最流行的目标检测程序Yolov5,这样就太好了,先来个速度测试,仅使用Intel CPU,没有模型压缩与剪枝等算法,也不依赖其他任何加速硬件。## 目标位置[相机系下:右方x为正,下方y为正,前方z为正]## 目标姿态-欧拉角-(z,y,x)
2023-06-15 09:06:42 1411
原创 AIGC 存储内容安全解决方案
2022年,ChatGPT的推出,使 AIGC 这个名词进入了大众的视野。4月11日,国家互联网信息办公室起草了《生成式人工智能服务管理办法(征求意见稿)》,这意味着国家已经在密切关注 AIGC 的发展,在合法合规的前提下,支持 AIGC 的商用及健康发展。对于存储在 COS 中经过了审核后的图片、音视频数据,可在应用层通过 COS 链接的形式返回给用户进行访问查看。根据审核结果:敏感数据直接拦截,正常的文本内容可直接通过应用返回给用户,正常图片进入对象存储 COS。生成的图片、文本数据进行审核;
2023-06-14 13:57:46 1023
原创 Transformer在CV领域有可能替代CNN吗?
目前已经有基于Transformer在三大图像问题上的应用:分类(ViT),检测(DETR)和分割(SETR),并且都取得了不错的效果。那么未来,Transformer有可能替换CNN吗,Transformer会不会如同在NLP领域的应用一样革新CV领域?后面的研究思路可能会有哪些?
2023-06-14 13:57:43 826
原创 4个维度搞懂Nacos注册中心
服务发现是指使用一个注册中心来记录分布式系统中的全部服务的信息,以便其他服务能够快速的找到这些已注册的服务。在单体应用中,DNS+Nginx 可以满足服务发现的要求,此时服务的IP列表配置在 nginx 上。在微服务架构中,由于服务粒度变的更细,服务的上下线更加频繁,我们需要一款注册中心来动态感知服务的上下线,并且推送IP列表变化给服务消费者,架构如下图。本篇文章向大家介绍 Nacos 服务发现的基本概念和核心能力以及实现的原理,旨在让大家对 Nacos 的服务注册与发现功能有更多的了解,做到心中有数。
2023-06-14 13:56:19 442
原创 大规模网站架构的缓存机制和几何分形学
缓存机制简单总结可以说是空间换时间,被用于提升系统交互的效率。而有趣的是,这种缓存机制令人惊奇并且优美的遵循着“几何分形”的规律,也就是几何分形学中的“自相似性”。【导读】徐汉彬曾在阿里巴巴和腾讯从事4年多的技术研发工作,负责过日请求量过亿的Web系统升级与重构,目前在小满科技创业,从事SaaS服务技术建设。在过去的工作中,徐汉彬从事各类缓存建设和优化,遇到问题无数,从各种各样的问题中,逐渐总结出它们之间的“共性”,而这个“共性”又优雅地遵循“几何分形学”。
2023-06-14 13:55:51 425
翻译 FixRes两次超越ImageNet数据集上的SOTA
FixRes是Facebook在19年提出的一个应用于图像分类的简单优化策略,论文名是Fixing the train-test resolution discrepancy,在这篇论文中作者发现了在ImageNet数据集上的分类模型中常采用的数据增强会导致训练和测试时的物体分辨率(resolution)不一致,继而提出FixRes策略来改善这个问题:常规训练后再采用更大的分辨率对模型的classifier或最后的几层layers进行finetune。利用FixRes这个简单的策略对ImageNet数据集上
2023-06-14 13:53:45 236
翻译 10个高级sql写法
MySql 中的排序 ORDER BY 除了可以用 ASC 和 DESC,还可以通过自定义字符串/数字来实现排序。这里用 order_diy 表举例,结构以及表数据展示:ORDER BY FIELD(str,str1,...) 自定义排序sql如下:sql复制代码SELECT * from order_diy ORDER BY FIELD(title,'九阴真经', '降龙十八掌','九阴白骨爪','双手互博','桃花岛主', '全真内功心法','蛤蟆功','销魂掌','灵白山少主');
2023-06-14 13:52:10 263
原创 使用AI优化慢SQL,开发秒变DBA
慢 SQL 经常会让应用程序响应变慢,轻者影响用户体验,严重的时候可能会导致服务不可用。如果,每次遇到慢 SQL 都求助于 DBA,一方面效率很低,另一方面也会很没面子。所以,我们一起来看看如何使用AI能力给出超越一般DBA的 SQL 优化建议。我们看看,如何使用 NineData 的 AI 功能完成 SQL 优化。
2023-06-14 13:44:51 514
翻译 链路追踪(Tracing)很简单:链路成本指南
广义上的链路成本,既包含使用链路追踪产生的数据生成、采集、计算、存储、查询等额外资源开销,也包含链路系统接入、变更、维护、协作等人力运维成本。为了便于理解,,人力成本将在下一小节(效率)进行介绍。
2023-06-14 13:44:04 124
翻译 2023 前端性能优化清单
本文将从三个角度页面渲染,打包优化,总体优化)分析前端性能优化的一些方案。如有错误,欢迎指出,也可以在评论区提出你对性能优化的一些见解,相互学习,共同进步!💪小彬之前也总结过一篇关于性能检测的文章,有兴趣的可以看看提点建议传送门。
2023-06-13 00:50:56 212
翻译 GPT-4的20个起飞的姿势
这些是您可以尝试的最佳聊天GPT商业理念。人工智能驱动的企业正在激增,企业家利用这项技术的机会是巨大的。ChatGPT 有潜力彻底改变现有行业,创造新行业,并为消费者提供高度个性化的服务。如果您想创业,请考虑将 ChatGPT 纳入您的业务模式并以创新的方式应用它。随着技术的不断发展,人工智能在不同行业和市场的潜在应用也将如此。
2023-06-13 00:48:00 401 1
翻译 LangChain + ChatGLM 实现本地知识库问答
本文使用LangChain+ChatGLM来实现一个简单的基于本地知识库的问答系统,可以在完全不使用openai提供的api来完成本地知识库问答系统的搭建,如果有需要做本地私有化知识库问答系统的,可以参考此方案。
2023-06-13 00:33:01 6797
原创 如何搭建高可用redis架构?
Web 使用客户端连接其中一台 Redis Sentinel 集群中的一台机器的某个端口,然后通过这个端口获取到当前的主节点,然后再连接到真实的 Redis 主节点进行相应的业务员操作。内网 DNS 按照一定的规则分配,比如 xxxx.redis.cache/queue.port.xxx.xxx,第一个段表示业务简写,第二个段表示这是 Redis 内网域名,第三个段表示 Redis 类型,cache 表示缓存,queue 表示队列,第四个段表示 Redis 端口,第五、第六个段表示内网主域名。
2023-06-13 00:17:17 470
原创 谈谈GPT-4文本代码降本减料引起的质量下降
先是少数用户提出质疑,随后大量网友表示自己也注意到了,还贴出不少证据。有人反馈,把GPT-4的3小时25条对话额度一口气用完了,都没解决自己的代码问题。无奈。这就引起不少人怀疑,OpenAI是不是为了节省成本,开始?两个月前GPT-4是世界上最伟大的写作助手,几周前它开始变得平庸。我怀疑他们削减了算力或者把它变得没那么智能。这就不免让人想起微软“出道即巅峰”,后来惨遭“前额叶切除手术”能力变差的事情……网友们相互交流自己的遭遇后,,成了大家的共识。一场。
2023-06-13 00:16:46 634 1
原创 GPT-4的中国2023高考作文
还是那句话,GPT是以成年人的数据训练出来的,而成年人是数据具备了极强的逻辑性,也正因此,GPT最。这就是我说的,它不仅仅是写的有条理,还有层次递进,这个太夸张了,可以说轻松超越99%的普通人。不知道你们有没有想到这么多角度,反正我这么短时间是想不出来的,太牛了!依然不行,依然是那副强逻辑的修辞和表达,我很失望,它不懂我的文艺。好啦,彩虹屁吹完了,那么我再来说下缺点或者说劣势在哪。嗯,你可能要说了,是你问的不对。也许确实是我问法不对,但我仍然坚定的认为,我先说下我的整体感受,然后再具体分析。
2023-06-13 00:15:52 3227
翻译 Facebook如何训练超大模型
我们在前文介绍过,微软 ZeRO 可以对一个万亿参数模型可以使用 8 路模型并行、64 路管道并行和 8 路数据并行在 4,096 个 NVIDIA A100 GPU 上进行扩展。而FSDP(Fully Sharded Data Parallel)是Facebook 深度借鉴微软ZeRO之后提出的PyTorch DDP升级版本,可以认为是对标微软 ZeRO,其本质是 parameter sharding。Parameter sharding 就是把模型参数等切分到各个GPU之上。
2023-06-12 13:07:44 268
翻译 Hugging Face推出Transformers Agents:大语言模型界的AutoGPT
之前 AutoGPT 大火,很多人尝试用它来分析金融数据、自动编写爬虫脚本、抓取数据做市场调研、生成可视化报告等等。但是,由于 AutoGPT 做的是一个通用性实验方案,因此很多东西在定制性上比较差,这就导致脚本在实际运行中,会出现很多不可控因素。比如,脚本会自动给你生成一堆乱七八糟的文件,跑了半天还是没抓到重点,每次运行都需要重新再来一遍,内容产出性价比很低等等。
2023-06-12 09:07:39 437
原创 Reinforce算法原理及Tensorflow代码实现
Q-learning和DQN算法都是强化学习中的Value-based的方法,它们都是先经过Q值来选择动作。强化学习中还有另一大类是Policy Gradient 是一类直接针对期望回报(Expected Return)通过(Gradient Descent)进行策略优化的强化学习方法。这一类方法避免了其他传统强化学习方法所面临的一些困难,比如,没有一个准确的价值函数,或者由于连续的状态和动作空间,以及状态信息的不确定性而导致的难解性(Intractability)。
2023-06-12 09:03:23 696
原创 人工智能体系和实战指南
许多人对AI技术有兴趣,但由于其知识点繁多,难以系统学习,学习没有方向等等问题。我们的专栏旨在为零基础、初学者和从业人员提供福利,一起探索AI技术,从基础开始学习和介绍。让你从零基础出发也能学会和掌握人工智能技术。在快速发展的技术中,人类已经开发出尺寸紧凑、速度快、能够极大地简化我们生活方式的各种设备。其中,计算机科学蓬勃发展的技术之一就是人工智能。现在,AI已经在我们身边,并与各种子领域合作,从自动驾驶汽车到下棋、证明定理、播放音乐和绘画等各个方面。AI是一个迷人且普遍的领域,未来将具有广泛的应用。
2023-06-12 09:01:29 678
翻译 Transformer 中 Mask 的那些事
具体来说,最有效的修改是 N-gram mask 和相似的单词替换,这是对 mask 的语言模型任务的修改。令人惊讶的是,我们发现 40% 的遮蔽概率的输入序列可以优于 15% 的基线,通过对下游任务的微调来衡量可以发现,甚至遮蔽 80% 的字符也可以保留大部分性能。huggingface 中 data allcator 使用的是动态 mask,但不是复制数据,而是每一个 epoch 的 mask 策略都不同,这样就可以达到动态 mask 的效果了,从而使得每一个 epoch 的 mask 的情况都不同。
2023-06-11 17:25:44 968
翻译 图像分类:LeNet/AlexNet/VGG/GoogleNet/DarkNet总结
VGG的命名来源于论文作者所在的实验室Visual Geometry Group,其对卷积神经网络进行了改良,探索了网络深度与性能的关系,用更小的卷积核和更深的网络结构,取得了较好的效果,成为了CNN发展史上较为重要的一个网络。图1(a)是Inception模块的设计思想,使用3个不同大小的卷积核对输入图片进行卷积操作,并附加最大池化,将这4个操作的输出沿着通道这一维度进行拼接,构成的输出特征图将会包含经过不同大小的卷积核提取出来的特征,从而达到捕捉不同尺度信息的效果。DarkNet53的网络结构如。
2023-06-11 17:25:38 731
原创 百度图像识别 API
在实际开发过程中,获取access_token值并不是单独写成一个页面文件,而是写在项目系统的配置中;由于access_token值有效期为30天,可通过判断是否失效,来重新请求access_token值。该接口支持识别10万个常见物体及场景,接口返回大类及细分类的名称结果,且支持获取图片识别结果对应的百科信息。:使用图像识别需用到access_token值,因此需先获取到,以便下面代码的使用。返回的数据如下,红框内的就是我们所要的access_token值。:百度图像识别API接口有多种,这里使用的是【
2023-06-11 17:22:43 4283
翻译 Nacos集群初探
下载速度实在太慢了,换成gitee下载吧下载并解压到本地目录,我的目录是/Users/doubledumbao/software。
2023-06-10 18:07:40 54
原创 提升技术的13个建议
优秀的程序员,之所以优秀,是因为他会总结踩过的坑,避免重蹈覆辙。所以,田螺哥建议你,日常开发中,如果你踩了哪些坑,就需要总结下来.茶余饭后,再温习温习Redis分布式锁使用,可能会有哪些坑嘛?线程池使用有哪些坑?Java日期处理又又哪些坑嘛?使用可能有哪些坑?细数线程池的10个坑Redis分布式锁的10个坑Java日常开发的21个坑,你踩过几个?程序员必备:Java日期处理的十个坑这些都是我工作总结出来的,也希望你们日常开发中,遇到哪些坑,都总结下来哈。
2023-06-10 18:00:48 458
原创 10个Lambda表达式必须掌握
Lambda表达式是一种在现代编程语言中越来越常见的特性,可以简化代码、提高生产力。这篇文章将介绍10个必须掌握的Lambda表达式,这些表达式涵盖了在实际编程中经常用到的常见场景,例如列表操作、函数组合、条件筛选等。通过学习这些Lambda表达式,你将更加深入地理解函数式编程的思想,能够更加高效地编写代码。
2023-06-10 17:57:47 2881
原创 《2023金融科技十大趋势报告》重磅发布:安全成为金融科技发展生命线
截至目前,腾讯安全已覆盖金融领域超过80%的标杆客户,为中国银行、中国建设银行、中国光大银行、中国民生银行、华夏银行、吉林农信、济宁银行、青岛银行等金融机构提供欺诈识别、金融级身份认证、防止恶意营销、预防“羊毛党”等服务,累计拦截超5000万次可疑交易,护航银行安全放款超万亿元。DRG的实施需要考虑风险管理数字化,组织将数据集中化管理,持续进行风险分析,并建立组织风险视图,自动化持续跟踪业务风险、组织风险和数据风险,实现对风险分析过程的全面治理。隐私计算常见的流派包括可信计算、联邦学习、多方安全计算。
2023-06-10 17:48:44 271
翻译 Stable Diffusion 是如何运行的
{稳定扩散|Stable Diffusion}是由CompVis和RunwayML团队开发的一系列图像生成模型,最初于2022年发布。它的主要功能是基于文本输入生成具有美感和细节的图像,但它还可以执行其他任务,如修复图像缺失部分inpainting)、扩展图像)和图生图。简而言之,{稳定扩散|Stable Diffusion}是一个文本到图像的模型。给它一个文本提示。它将返回一个与文本相匹配的图像。在本文中,我试图用简单的术语解释稳定扩散的工作原理。
2023-06-10 17:47:01 1039
2021年全球财富报告:客户至上,掘金3大财富管理客群-BCG-2021.8-48页.pdf
2021-10-03
2021互联网广告半年大报告-QuestMobile-2021.8.31-54页.pdf
2021-10-03
2021Q4万宝盛华雇佣前景调查报告-ManpowerGroup-2021-36页.pdf
2021-10-03
巨量算数-“后”积薄发 行稳致远——2021懂车帝后链路价值洞察报告-2021.09-42页.pdf
2021-10-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人