- 博客(427)
- 收藏
- 关注
RSS订阅原创 自学黑客（网络安全），一般人我劝你还是算了吧_网络安全漏洞挖掘需要报课吗
我们知道计算机最早是在西方发明出来的，很多名词或者代码都是英文的，甚至现有的一些教程最初也是英文原版翻译过来的，而且一个漏洞被发现到翻译成中文一般需要一个星期的时间，在这个时间差上漏洞可能都修补了。”答案是否定的，黑客用的电脑,不需要什么高的配置,只要稳定就行.因为黑客所使用的一些程序,低端CPU也可以很好的运行,而且不占什么内存.还有一个,黑客是在DOS命令下对进行的,所以电脑能使用到最佳状态!【4】再比如你操作系统玩的好，你提权就更加强，你的信息收集效率就会更加高，你就可以高效筛选出想要得到的信息。
2024-11-01 13:56:37
972
原创 入行网络安全需要学习哪些知识点？白帽子佬都给你汇总在这里，一文全懂_网络安全入门应该学什么
理论层面的知识是面试必备，大家要熟练掌握（占40%），业务项目的实操部分是职场晋升必备（占60%）；就业环节，简历作为敲门砖优化工作必不可少（占70%），面试过程大家基于学习能力，完全可以去自信面对即可（占30%）。最后还是老规矩：想要转行学习网络的同学，希望能进一步告知你的年龄、学历、专业背景以及目前在城市等具体情况，方便我针对性给到更合理的建议哟~
2024-11-01 13:55:19
708
原创 什么是网络安全网络安全包括哪几个方面学完能做一名黑客吗？
网络安全是指保护网络系统、硬件、软件以及其中的数据免受未经授权的访问、使用、披露、修改、破坏或干扰的措施和实践。保护机密性：确保只有授权的人员能够访问敏感信息，防止数据泄露。维护完整性：保证数据在存储、传输和处理过程中不被非法修改或篡改。比如金融交易数据、医疗记录等必须保持完整准确。保障可用性：确保网络系统和服务能够持续正常运行，可供合法用户随时使用。像电商网站在购物高峰期间不能出现无法访问的情况。防范网络攻击。
2024-11-01 13:52:28
502
原创 RAG前沿之RAG–知识图谱构建框架Graphusion：兼看LongRAG双视角检索增强生成范式
除了合并和解决冲突外，Graphusion还可以从。
2024-11-01 13:50:14
690
原创 ChatGPT能预测时间序列？基于大模型的时间序列预测中的迭代事件推理_chatgpt能预测时间序列
这主要是因为大量不相关的新闻会引入过多的标记，增加了LLM的处理负担，且可能引入噪声和错误的因果信息，导致误导性的预测。这种方法将庞大的新闻数据集浓缩为精炼的相关文章。我们的方法在依赖新闻所体现的事件对预测有重大影响的领域（如电力需求、汇率和比特币市场）中，显著优于仅依赖历史时间序列数据的传统方法。该阶段让大家对大模型 AI有一个最前沿的认识，对大模型 AI 的理解超过 95% 的人，可以在相关讨论时发表高级、不跟风、又接地气的见解，别人只会和 AI 聊天，而你能调教 AI，并能用代码将大模型和业务衔接。
2024-11-01 13:49:42
716
原创 LLMs在股票投资组合崩溃中的时间关系推理
这表明将预测投资组合崩溃的任务分解为较小的思维过程是有益的。投资者需要动态处理新闻文章中发现的每条新信息的影响，分析新闻事件和投资组合股票之间影响的关系网络，以及理解不同时间步之间影响的时间上下文，以获得对目标投资组合的整体聚合效应。突然，一场前所未有的全球性事件发生了，比如2007年的金融危机或2020年的新冠疫情，这可能会对你的投资组合造成重大影响。每天，对于LLM生成的每个受影响实体，我们搜索记忆模块以查找其先前的提及，并将其添加到我们的每日图G中，从而得到一个新的时间上下文图Gtemporal。
2024-11-01 13:47:32
173
原创 【IEEE TII】用于工业过程预测建模和关键样本分析的数据模式相关可解释Transformer网络
准确预测难以测量的质量变量对于工业过程控制和优化至关重要。然而，原材料质量和生产条件的波动可能会导致工业过程数据在多种工作条件下分布。在相同工作条件下的数据显示出相似的特征，这些特征通常被定义为一种数据模式。因此，整个过程数据表现出多模式特性，这给开发统一的预测模型带来了巨大的挑战。此外，现有数据驱动预测模型的不可解释性给其实际应用带来了很大的阻力。为了解决这些问题，本文提出了一种新的与模式相关的可解释Transformer网络（DMRl-Former），用于工业过程中的预测建模和关键样本分析。
2024-11-01 13:46:35
677
原创 医图顶会 MICCAI‘24 Swin-UMamba：基于ImageNet的预训练的基于Mamba的UNet网络
精确的医学图像分割需要整合从局部特征到全局依赖的多尺度信息。然而，现有方法在建模长距离全局信息方面存在挑战，其中卷积神经网络受到其局部感受野的限制，视觉变换器因其注意力机制的高二次复杂性而受到限制。最近，基于Mamba的模型因其在长序列建模方面的卓越能力而受到广泛关注。一些研究表明，这些模型可以在各种任务中胜过流行的视觉模型，提供更高的准确性、更低的内存消耗和更小的计算负担。然而，现有的基于Mamba的模型大多是从头开始训练的，并没有探索预训练的力量，这在数据高效的医学图像分析中被证明是非常有效的。
2024-11-01 13:45:09
643
原创 智谱AI上线最新“自主智能体”，“Her”终于能照进现实了
在对标OpenAI之路上，智谱AI又近了一步。今年年初，OpenAI被爆出将自研AI Agent软件，它可替代人类，自动导航至任何网站并执行指定任务。10月25日，智谱AI推出相似产品——，智谱将其称为是一个可模拟用户访问网页、点击网页的浏览器助手。智谱的展示视频显示，AutoGLM可实现网页进行线上点餐、整理小红书笔记并生成攻略、总结论文等功能。同时，智谱AI还推出了。这款情感语音模型不仅能够模拟真实的情感表达，甚至连细微的停顿、喘气都表现得惟妙惟肖。
2024-11-01 13:44:22
660
原创 【宠粉赠书】大型语言模型实战指南：应用实践与场景落地
导读：大型预训练模型是一种在大规模语料库上预先训练的深度学习模型，它们可以通过在大量无标注数据上进行训练来学习通用语言表示，并在各种下游任务中进行微调和迁移。随着模型参数规模的扩大，微调和推理阶段的资源消耗也在增加。针对这一挑战，可以通过优化模型结构和训练策略来降低资源消耗。一方面，针对训练参数过多导致资源消耗巨大的情况，可以考虑通过固定基础大型语言模型的参数，引入部分特定参数进行模型训练，大大减少了算力资源的消耗，也加速了模型的训练速度。比较常用的方法包括前缀调优、提示调优等。
2024-10-31 14:44:53
294
原创 AI大模型探索之路-训练篇7：大语言模型Transformer库之HuggingFace介绍_huggingface transformer库
在的官方网站上，你可以发现一个丰富的开源宝库，其中包含了众多机器学习爱好者上传的精选模型，供大家学习和应用。此外，你也可以将自己的模型分享至社区，与他人共同进步。HuggingFace因其开放和协作的精神被誉为机器学习界的GitHub。在这里，用户能够轻松获取到Transformers库里各式各样的组件资源，助力各类机器学习项目的实现和发展。1）HuggingFace的核心库是Transformers，这个库集成了各种预训练模型、分词器和相应的工具。
2024-10-31 14:43:42
1018
原创 大模型训练优化方法_大模型调优
在训练模型尤其是大模型的时候，如何加快训练速度以及优化显存利用率是一个很关键的问题。本文主要参考HF上的一篇文章：https://huggingface.co/docs/transformers/perf_train_gpu_one，以及笔者在实际训练中的一些经验，给出一些比较实用的方法。方法加快训练速度优化显存利用率YesYesNoYesNoYesYesNoYesYesYesNoNoYesYesNo。
2024-10-31 14:39:37
863
原创 【人工智能】Transformers之Pipeline（概述）：30w+大模型极简应用
管道是一种使用模型进行推理的简单而好用的方法。这些管道是从库中抽象出大部分复杂代码的对象，提供了专用于多项任务的简单 API，包括命名实体识别、掩码语言建模、情感分析、特征提取和问答。在使用上，主要有2种方法使用task实例化pipeline对象使用model实例化pipeline对象。
2024-10-31 14:37:01
648
原创 揭秘”大模型加速器”如何助力大模型应用
合合信息“大模型加速器”集成了先进的acge_text_embedding模型（简称“acge模型”）可以有效优化“已读乱回”的“幻觉”的问题。通过对海量多领域数据的精细分析和学习，极大地提升了大模型在知识推理、智能问答和个性化推荐等方面的能力、速度和可靠性。acge模型的应用不仅使搜索和问答系统能够超越简单的文本匹配，更能深入洞察并精准回应用户的真实需求。
2024-10-31 14:34:50
943
原创 PyTorch建模与应用：从深度学习到大模型_动手学pytorch建模与应用从深度学习到大模型
动手学PyTorch建模与应用:从深度学习到大模型》是一本从零基础上手深度学习和大模型的PyTorch实战指南。全书共11章，内容涵盖了从深度学习的基础概念到大语言模型的应用。第1章介绍了深度学习的概念、应用场景及开发环境搭建。第2章详细介绍了PyTorch数学基础，包括函数、微分、数理统计、矩阵等基础知识及其案例。第3章讲解了数据预处理及常用工具，如NumPy、Pandas、Matplotlib、数据清洗、特征工程以及深度学习解决问题的一般步骤。第4章。
2024-10-31 14:33:31
746
原创 大模型的挑战与优势？普通人学习大模型应该怎么学？_大模型面临的挑战
近年来，人工智能领域掀起了一股“大模型”热潮，吸引了无数研究者和企业关注。所谓“大模型”，是指那些参数量巨大、结构复杂人工智能模型，如谷歌BERT、OpenAI的GPT等。这些模型在自然语言处理、计算机视觉等任务中取得了显著成果，引领着人工智能技术发展。那么，这些“大模型”究竟有何魅力？它们又将给人工智能领域带来怎样变革？大模型出现是人工智能技术发展必然趋势。随着硬件设备不断升级、数据量爆发式增长以及算法日益成熟，人工智能模型得以在更大规模上进行训练，从而实现更强大功能。
2024-10-31 14:26:13
960
原创 大模型应用场景落地项目实操，附详细解读，学了大模型不会落地？看完这一篇就够了_大模型项目
你是否学习了大模型技术，但是不知道如何落地？今天带来5个大模型落地项目，保证你看完一定有所收获！
2024-10-31 14:16:17
983
原创 一篇文章说清楚数据仓库架构！
数据仓库架构作为数据管理和分析的核心基础设施，扮演着关键角色。数据仓库架构是一个需要精心设计的体系，旨在整合来自不同数据源的海量数据，将其转化为有价值的信息，以满足企业各个层面的决策需要。随着技术的不断进步和优化，数据仓库架构也在不断演进和发展。本文就来谈谈目前常用的数据仓库架构，大致有4类：数据仓库集市架构、集中式架构、Lambda架构和Kappa架构。在企业信息化建设的过程中，为了高效支持多样化的业务主题，我们常常会面临选择独立的数据集市架构还是集中式架构的决策。
2024-10-30 13:39:24
1155
原创 大家都说通义大模型好，究竟好在哪？
都说国产大模型“通义千问”能打，到底是真强还是智商税？今天就带你看看，这个国产“AI猛将”凭什么火出圈！如今的AI领域竞争激烈，提到大模型，许多人第一反应可能是GPT、Llama等大牌“选手”。然而，阿里巴巴的“通义千问”却让不少开发者拍案称好。今天，我们就来一起揭开通义千问的“好”是如何做到的。2023年4月，阿里巴巴推出通义千问，选择了“全开源”的策略，成为全球开发者关注的焦点。
2024-10-30 13:37:37
570
原创 构建多智能体系统：全面指南！
Groq 是 Multi AI Agent 生态系统中的另一个强大工具。它专注于提供卓越的计算速度和能源效率，使其成为 AI 推理任务的理想选择。Groq 在 AI 推理中的作用AI 推理涉及使用训练好的模型对新数据进行预测。Groq 通过优化性能并确保实时结果来增强这一过程。使用 Groq 的主要优势速度：Groq 的架构旨在实现快速处理，从而加快决策速度。质量：它通过减少推理过程中的错误来确保高质量的输出。能源效率：Groq 的设计减少了能源消耗，使其成为 AI 应用的可持续选择。
2024-10-30 13:36:20
883
原创 Meta-Chunking：一种用于提高RAG性能的文本分割技术
尽管RAG技术在 LLMs 中具有潜力，但在文本分块方面常常被忽视。文本分块的质量直接影响知识密集型任务的表现。本文提出概念，这是一种介于句子和段落之间的文本分割技术，旨在通过逻辑感知来提高文本分割的效率；。此外，还提出了结合Meta-Chunking与动态合并的策略，在不牺牲逻辑连贯性的前提下，实现细粒度与粗粒度文本分块之间的平衡。
2024-10-30 13:35:38
935
原创 大模型部署技巧
本文是实用生成式人工智能应用系列文章的一部分。在这一系列文章里，我们呈现了来自顶尖生成式人工智能实践者的现实世界解决方案和实操经验。当大多数人提及大语言模型，他们可能会想到 OpenAI 旗下的某款模型。这些模型不仅规模大，而且功能强大，托管在 OpenAI 的服务器上，并通过网络 API 进行调用。这些基于 API 的模型调用是快速尝试 LLM 的一种方式。然而，企业也可以选择部署自己的模型。部署或自托管 LLM 是一项具有挑战性的任务，并不像调用 OpenAI 的 API 那样简单。
2024-10-30 13:34:18
875
原创 多模态数据融合最新Nature来袭！四种方法就上岸，可别错过了这波好思路！
最近一篇新发表在Nature Communications上的高分佳作引起了广泛关注，文章提出了一种方法，利用临床-组织学-基因组分析整合的多分类器系统，达到了远高于单一分类器的预测性能，实力证明了多模态数据融合在提高癌症预后预测准确性方面的优势。实际上，这种方法一直是医疗领域的重要技术，它可以通过整合来自不同源的数据，给我们提供一个全面、完整的患者信息视图，这样因此，已经根据主流方法做了分类，开源代码基本都有。
2024-10-30 13:32:49
543
原创 多模态大模型预训练策略探究
A1：训练策略上确定不同阶段冻结的组件应该是哪些 + 数据类型和配比。预训练通常都是需要先经过一个阶段的视觉概念学习，然后再经过一个多任务学习阶段。如果vision encoder足够强了，在视觉概念学习阶段就无需放开训练，否则可以考虑和projector一起训。llm在视觉概念学习阶段通常是frozen的，但有时候两个阶段也可以合在一起，可以采用比较强的vision encoder，就不用纠结是否打开vision encoder训练了，如果不够强数据量又足够，就三个组件都打开一起训练。
2024-10-29 15:26:27
956
原创 多模态 Arxiv 20241024 统一大模型卷疯了！字节、英伟达纷纷下场！
作者: Zhen Zhao, Jingqun Tang, Binghong Wu, Chunhui Lin, Shu Wei, Hao Liu, Xin Tan, Zhizhong Zhang, Can Huang, Yuan Xie翻译摘要: 在这项工作中，我们提出了TextHarmony，这是一个统一而多功能的多模态生成模型，在理解和生成视觉文本方面有着娴熟的能力。同时生成图像和文本通常会导致性能下降，因为视觉和语言模态之间存在内在不一致。
2024-10-29 15:25:48
692
原创 AI代理全面崛起，企业自动化迈向智能新时代
全自动智能代理的能力由四个要素共同构成，它们相辅相成，形成完整的智能代理能力：推理、外部记忆、执行和规划。
2024-10-29 15:24:22
828
原创 大模型是如何训练的？大模型入门到精通，收藏这一篇就够了
大模型（Large Models）的训练是近年来人工智能领域的核心技术之一，尤其是在自然语言处理、计算机视觉等任务中，如 GPT、BERT 等模型的成功背后，离不开复杂的训练过程。本文将为你介绍大模型是如何训练的，包括数据准备、模型架构、训练方法和硬件支持等方面。大模型的训练需要大量的数据，因为它们需要从海量信息中学习模式和规律。
2024-10-28 14:48:55
825
原创 大模型产品经理干什么？大模型零基础入门到精通，收藏这一篇就够了
最近我一直在想，大模型已经不可避免地极大影响了传统行业信息化的走向，不是业务融入到AI中，而是将AI融入到业务场景里，每个从业者需要考虑如何融合的问题。那作为一个AI方向的产品经理，在大模型时代到底需要哪些核心能力？这段时间闭关，正好有了一些可以安静思考的时间，我仔仔细细地思考了一遍。就是说，你要对人工智能的发展历程有个大概的了解，特别是现在流行的大模型，比如它的结构是怎样的，它是怎么工作的，还有它经过了哪些训练阶段，用了什么样的训练方法。
2024-10-28 14:47:10
986
原创 网络安全入门教程（非常详细）从零基础入门到精通，看完这一篇就够了。_网络安全教程
是一种面向对象、直译式电脑编程语言，具有近二十年的发展历史，成熟且稳定。它包含了一组完善而且容易理解的标准库，能够轻松完成很多常见的任务。它的语法简捷和清晰，尽量使用无异义的英语单词，与其它大多数程序设计语言使用大括号不一样，它使用缩进来定义语句块。与Scheme、Ruby、Perl、Tcl等动态语言一样，Python具备垃圾回收功能，能够自动管理内存使用。它经常被当作脚本语言用于处理系统管理任务和网络程序编写，然而它也非常适合完成各种高级任务。Python虚拟机本身几乎可以在所有的作业系统中运行。
2024-10-28 14:39:31
906
原创 计算机行业会是下一个土木工程吗？零基础入门到精通，收藏这篇就够了
在一些平台中，关于此类话题的讨论，动辄就有上百万的浏览量。内容概要：包括 内网、操作系统、协议、渗透测试、安服、漏洞、注入、XSS、CSRF、SSRF、文件上传、文件下载、文件包含、XXE、逻辑漏洞、工具、SQLmap、NMAP、BP、MSF…网上虽然也有很多的学习资源，但基本上都残缺不全的，这是我自己录的网安视频教程，上面路线图的每一个知识点，我都有配套的视频讲解。首先要跟大家强调的是，计算机不等于互联网，可以说，没有计算机，就没有互联网，但没有互联网，计算机依旧有可发挥作用的平台。
2024-10-26 14:58:52
439
原创 大模型RAG是什么意思，大模型入门到精通，收藏这篇就够了
大模型是，具有参数量大、训练数据量大、计算能力要求高、应用广泛等特点。对比传统人工智能模型，大模型具有以下特点：**参数量大。**在参数规模上可能达到十亿、百亿、千亿级别，远超传统模型百级、千万级别参数规模。**训练数据****量大。**传统人工智能模型通过一定量的标注数据进行训练，而大模型通过海量数据及设计良好、内容多样的高质量标注语料库进行训练。**计算能力要求高。**大模型很难在单个 GPU 上进行训练，需要使用 DeepSpeed、Megatron-LM 等训练优化技术在集群中进行分布式训练。
2024-10-26 14:55:15
1050
原创 2024版最新转型大模型产品经理指南（非常详细）零基础入门到精通，收藏这篇就够了
转行做大模型所面临的机会和挑战，以及如何把握和应对，如：转行做大模型所面临的机会主要有：大模型是AI领域的一个重要趋势，具有强大的泛化能力和适应能力，在多个任务和领域上表现出惊人的成就。大模型可以利用海量的数据来学习通用的知识和能力，从而在多个场景和需求上提供高效的解决方案。大模型可以带来更好的用户体验和商业价值，在各个行业和领域中创造更多的创新和变革转行做。大模型所面临的挑战主要有：大模型需要海量的数据和计算资源来训练和运行，对于硬件设备、网络带宽、存储空间等方面有很高的要求。
2024-10-26 14:54:04
615
原创 2024版最新大模型agent原理图解，大模型入门到精通，收藏这篇就够了
大模型 Agent，作为一种人工智能体，是具备环境感知能力、自主理解、决策制定及执行行动能力的智能实体。简而言之，它是构建于大模型之上的计算机程序，能够模拟独立思考过程，灵活调用各类工具，逐步达成预设目标的智能存在。Agent 是 AI 大模型应用的主要新形态，在技术架构范式也发生了很大的变化，从面向过程的架构变成了面向目标架构。**—_2**__—_
2024-10-25 14:36:11
553
原创 2024版最新大模型入门学习：一分钟了解大模型的基础概念知识，收藏这一篇就够了
一、大模型的组成部分大模型通常指规模巨大、参数数量众多的机器学习模型，尤其在深度学习领域，这种模型一般由以下几个关键部分组成：1.神经网络架构：大模型的基础是复杂且多层次的神经网络架构，如深度前馈神经网络（包括但不限于卷积神经网络CNN、循环神经网络RNN、Transformer等）。2.海量参数：参数规模是衡量模型“大小”的关键指标，大模型往往拥有数百万甚至数十亿级别的参数。这些参数包括各个神经元之间的权重以及可能存在的偏置项。
2024-10-25 14:34:37
747
原创 2024版最新大模型算法入行&转行？指南来了！零基础入门到精通，收藏这篇就够了
最后简单总结一下，我认为现在总体的行业形势是资本进行了大规模投入，但是基本堆在预训练上，然后这个环节也容纳不了太多人就业，而且暂时也创造不了多少商业价值。所以很有可能一段时间后会有一个下行的阶段，现在做预训练这些创业公司死一批。然后随着应用端的工作越来越多，大家慢慢把投入方向往下移，往应用端发力，这时候会有一些找准机会和方向的公司出来。顺利的话各种LLM native应用就走入千家万户。(就纯粹我自己的想象哈哈哈)
2024-10-25 14:31:36
449
原创 大模型agent怎么做？大模型agent入门到精通，收藏这篇就够了
定义 Agent 要调用的工具，一个用于获取句子中不同汉字的数量的函数，同时将工具函数绑定到模型上12345678910defsentence):"""用于计算句子中不同汉字的数量"""set()forcharinsentence:if'\u4e00'
2024-10-25 14:26:22
763
原创 黑客入门指南，学习黑客必须掌握的技术
QL语言基础③数据库安全加固最后总结一下，要是成为心目的黑客大神，必须要会的内容还有很多，这里罗列的也就是基本功。除此之外，还要有较强的自学能力，有点问题就要问别人，自己不想办法解决，是不会走太远的。
2024-10-25 14:23:56
1011
原创 程序员太苦逼了，要不要转行？
网络安全产业就像一个江湖，各色人等聚集。相对于欧美国家基础扎实（懂加密、会防护、能挖洞、擅工程）的众多名门正派，我国的人才更多的属于旁门左道（很多白帽子可能会不服气），因此在未来的人才培养和建设上，需要调整结构，鼓励更多的人去做“正向”的、结合“业务”与“数据”、“自动化”的“体系、建设”，才能解人才之渴，真正的为社会全面互联网化提供安全保障。
2024-10-24 14:43:08
1338
原创 2024年最新网络工程专业主要要学习什么知识呢？_大学网络工程培养课程
为了帮助大家更好的学习网络安全，小编给大家准备了一份网络安全入门/进阶学习资料，里面的内容都是适合零基础小白的笔记和资料，不懂编程也能听懂、看懂，所有资料共282G，朋友们如果有需要全套网络安全入门+进阶学习资源包，可以点击免费领取**（如遇扫码问题，可以在评论区留言领取哦）~😝有需要的小伙伴，可以点击下方链接免费领取或者V扫描下方二维码免费领取🆓**读者福利 |**👉CSDN大礼包：《网络安全入门&进阶学习资源包》免费分享**（安全链接，放心点击）**
2024-10-24 14:40:30
751
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人