- 博客(958)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 XL-LightHouse 与 Flink 和 ClickHouse 流式大数据统计系统
一个Flink任务只能并行处理一个或少数几个数据流，而XL-LightHouse一个任务可以并行处理数万个、几十万个数据流；一个Flink任务只能实现一个或少数几个数据指标，而XL-LightHouse单个任务就能支撑大批量、数以万计的数据指标。1、XL-LightHouse ：2、流式统计虽然是属于流式计算的一种计算形式 流式统计无外乎Count运算、Sum运算、Bitcount运算(count distinct)、Max运算、Min运算、Avg运算、Seq运算(时序数据)、Dimens运算
2023-09-09 12:33:39
627
原创 Meta AI 多语言阅读理解数据集 Belebele
该数据集可对单语和多语模型进行评估，但其并行性也可在一些跨语言环境中对跨语言文本表征进行评估。这些问题经过精心设计，以区分具有不同一般语言理解水平的模型。此外，还有 7 种语言包含在两种不同的脚本中，从而为印地语、乌尔都语、孟加拉语、尼泊尔语和僧伽罗语的罗马化变体制定了首个 NLP 基准。研究人员利用这个数据集评估了多语言屏蔽语言模型（MLM）和大语言模型（LLM）的能力。结果表明，尽管以英语为中心的 LLM 有显著的跨语言迁移能力，但在平衡的多语言数据上经过预训练的更小的 MLM 仍然能理解更多的语言。
2023-09-04 19:36:55
191
原创 Meta 推出 SeamlessM4T，无缝翻译和转录语音和文本
SeamlessM4T 建立在 Meta 在该领域的现有工作基础上，包括 No Language Left Behind、Universal Speech Translator、SpeechMatrix 和 Massively Multilingual Speech。SeamlessM4T允许跨语音和文本单元进行评估的 BLASER 2.0 进行测试时，与目前最先进的语音到文本任务模型相比，SeamlessM4T 模型在语音到文本任务中对抗背景噪声和说话者变化的表现更好。
2023-08-25 22:06:16
422
原创 Code Llama 是Meta 开源基于 Llama 2 的 AI 代码生成大模型
Code Llama 可根据代码和自然语言提示生成代码和有关代码的自然语言，支持多种主流编程语言，包括 Python、C++、Java、PHP、Typescript (Javascript)、C# 和 Bash。Code Llama 提供了三种不同大小的模型，分别具有 7B、13B 和 34B 参数，可以用于代码补全和调试。
2023-08-25 21:55:01
438
1
原创 桌面软件开发框架
Mac Cocoa/WebKit，Linux gtk-webkit2，Windows 10 Edge，开源且免费（MIT）有 go、Rust、Python 等语言的绑定，不过官方支持的是 go 语言，C 和 C++，操作浏览器的 API 非常少。wxWidgets 是 1992 年英国的一个大学教授开创的跨平台 GUI 软件，也非常成熟稳定，商业授权非常友好， C++ 开发的，兼容跨平台，Windows 是 Windows 窗口风格、Linux 是 Linux 窗口风格。
2023-08-25 21:49:41
646
原创 软件开发bug问题跟踪与管理
缺陷跟踪系统允许开发人员团队有效跟踪产品中尚未解决的缺陷、问题、议题、增强和其他变更请求。Redmine 是一个自由开源软件解决方案，它提供集成的项目管理功能、问题跟踪，并为多个版本控制选项的支持。除了 Git 和 Mercurial 等分布式版本控制功能外，Fossil 还支持错误跟踪、维基、论坛、电子邮件提醒、聊天和技术注释。它可用于存储、共享和跟踪具有各种属性、描述、评论和文件附件的问题。它提供了 Subversion 和 Git（或其他版本控制系统） 的接口、集成的 Wiki 和便捷的报告工具。
2023-08-21 22:08:59
1334
原创 Linux 内核第一版 (v0.01) 开源代码解读
Linux 内核首个开源版本 (v0.01) 的体积非常小，仅包含 10,239 行代码。如果除去注释和空行，只剩下 8,670 行。正因它足够小，所以方便理解，是了解类 UNIX 操作系统内核内部结构的良好起点。然而，Linux的第一个版本v0.01非常小。它足够小，可以理解，并且是了解类unix操作系统内核内部的一个很好的起点。的内部结构，Linux内核经常被认为是一个庞大的开源软件。在撰写本文时，最新版本是v6.5-rc5，包含36M行代码。不用说，Linux是几十年来许多贡献者辛勤工作的成果。
2023-08-14 20:10:58
1709
原创 BBR拥塞控制算法 v3
BBRv3 提交到上游 Linux 内核主线 TCP/networking 模块，并将 BBR 模块从 v1 升级到 v3 代码。它尤其适合在存在一定丢包率的弱网环境下使用。比如谷歌就通过 BBR 让内部和外部的网络能够以更高吞吐量和更低延迟更高效地运行。在这类环境下，BBR 的性能远超 CUBIC 等传统的拥塞控制算法。BBR 目前已迭代更新到 v3 版本，谷歌称 BBRv3 在内部已被广泛使用，并且表现出色，他们正在积极将 BBRv3 提交到上游 Linux 内核主线。
2023-08-14 19:49:27
910
原创 CVS，SVN，Git，Mercurial 代码管理工具
现代软件开发过程中要实现高效的团队协作，需要使用代码分支管理工具实现代码的共享、追溯、回滚及维护等功能。目前流行的代码管理工具，包括 CVS，SVN，Git，Mercurial 等CVS 和 SVN 是集中管理，Git 具有非常明显的优势，。从百度指数，也可以看到 Git 的优势被越来越多的人所认可。
2023-08-05 16:15:37
390
原创 TransGPT 开源交通大模型开源
TransGPT 作为一个通用常识交通大模型，可以为道路工程、桥梁工程、隧道工程、公路运输、水路运输、城市公共交通运输、交通运输经济、交通运输安全等行业提供通识常识。以此为基础，可以落脚到特定的交通应用场景中。它能够实现交通情况预测、智能咨询助手、公共交通服务、交通规划设计、交通安全教育、协助管理、交通事故报告和分析、自动驾驶辅助系统等功能。TransGPT 是开源交通大模型，主要致力于在真实交通行业中发挥实际价值。
2023-07-30 11:14:28
497
原创 免费商用 Meta 发布开源大语言模型 Llama 2
Llama 2 包括 Llama 2 和 Llama 2-Chat，包含了 70 亿、130 亿和 700 亿参数 3 个版本，其中 Llama 2-Chat 针对双向对话进行了微调，并且跟 ChatGPT 类似， Llama 2-Chat 也经历了预训练阶段 (PT)、指令微调 (SFT) 以及人类反馈强化学习 (RLHF) 三个阶段。具体来说，Llama 2 预训练模型是在 2 万亿的 token 上训练的，微调 Chat 模型是在 100 万人类标记数据上训练的。微软 拥抱Meta， OpenAI，
2023-07-30 10:59:57
870
原创 MyBatis-Flex 和MyBatis-Plus Fluent-MyBatis 比较
MyBatis-Flex 是一个优雅的 MyBatis 增强框架，它非常轻量、同时拥有极高的性能与灵活性。我们可以轻松的使用 Mybaits-Flex 链接任何数据库，其内置的 QueryWrapper^亮点 帮助我们极大的减少了 SQL 编写的工作的同时，减少出错的可能性MyBatis-Flex 主要是和与对比，内容来源其官网、git 或者 网络文章。
2023-07-13 22:57:08
1254
原创 jar-protect Jar 包加壳工具
jar-protect 是 java 的 jar 加密加壳工具，对 class 文件进行加密防护，避免反编译破解。java 本身是开放性极强的语言，代码也容易被反编译，没有语言层面的一些常规保护机制，jar 包很容易被反编译和破解。受 classfinal（已停止维护）设计启发，针对 springboot 日常项目开发，重新编写安全可靠的 jar 包加壳加密技术。
2023-07-06 21:51:31
1530
原创 FreeBSD 开源操作系统 30周年纪念特刊
FreeBSD 是一款开源操作系统，于 1993 年在加利福尼亚大学伯克利分校开发出来，目前每天都被全球数十亿人使用，并对我们产生了积极的影响。许多顶级的科技公司和产品都在使用它，包括提供电影流媒体服务的 Netflix，提供消息服务的 WhatsApp，以及强大的 PlayStation 4 索尼游戏机。由一些原来 BSD UNIX 的开发者后来转到 FreeBSD 的开发，使得 FreeBSD 在内部结构和系统 API 上和 UNIX 有很大的兼容性。FreeBSD 是开源免费。
2023-06-21 10:13:04
1731
原创 GPT-4 加持芯片设计开发速度
这项研究非常重要，其优点在于可以减少 HDL 转换过程中的人为错误，从而提高生产力和缩短设计和上市时间，并允许进行更具创意的设计，半导体芯片设计门槛也会降低，甚至是没有该领域技术技能的人也可以参与其中，这项研究的创新性和前瞻性有新的突破。这项研究表明，AI 也可以使硬件制造受益，特别是当它被用于对话时，你可以通过来回对话完善硬件设计，未来芯片制造的一个重要方向。经过专门训练的工程师将编写成硬件语言（HDL），例如 Verilog，以创建允许硬件执行其任务的实际电路元件。
2023-06-21 09:37:52
177
原创 ISO C++ 26 并发和并行性重大完善
ISO C++ 委员会举行会议正式通过了 C++ 26 的时间表。ISO C++ 标准委员会主席兼微软语言架构师 Herb Sutte，并发和并行小组仍在按计划推进 C++26 的 std::execution 和 SIMD 并行。删除标准属性不能改变程序的意义:它可以减少程序可能的合法行为，但它不能发明新的行为。特性测试宏不应该假装支持某个属性，除非实现实际实现了该属性的可选语义(即，不只是解析它，然后忽略它)标准属性必须是可解析的(也就是说，不能只是包含随机的无意义内容)。
2023-06-21 09:24:15
583
原创 AI人工智能模型 I-JEPA（世界模型）
目标是为不兼容的输入分配一个高能量，并为兼容的输入分配一个低能量。据悉，该模型由Meta研究科学家Gabriel Synnaeve领导的团队,目前用户可在Hugging Face上体验MusicGen，而且除了单一的文本提示词外，该模型还支持文本与旋律的组合输入。Meta 宣布推出一个全新的 AI 模型 Image Joint Embedding Predictive Architecture (I-JEPA)，可通过对图像的自我监督学习来学习世界的抽象表征，实现比现有模型更准确地分析和完成未完成的图像。
2023-06-16 19:52:12
904
原创 全球计算科学和人工智能领域Altair
Altair 正式启动全新数据分析与人工智能平台 Altair RapidMiner,Altair 在数据分析领域先后完成对 Datawatch、World Programming 和 RapidMiner 的收购，使数据产品组合不断丰富，在对公司内部所有的数据分析与人工智能技术进行了一系列整合后，Altair 打造出一款全新平台 ——Altair RapidMiner，这款平台涵盖数据接入、建模、操作与可视化的全面端到端解决方案，从而为用户实现更加敏捷的 AI 功能。
2023-06-12 14:27:09
339
原创 大屏数据可视化开源项目
3、数据图表 数据图表可聚合绑定多个不同格式的数据集，轻松定义同比、环比图表，内置折线图、柱状图、饼图、地图、雷达图、漏斗图、散点图、K 线图、桑基图等 60 + 开箱即用的图表，并且支持自定义图表配置项，支持编写和上传自定义图表插件。2、多样动态的数据集 ，支持创建 SQL、CSV、Excel、HTTP 接口、JSON 数据集，并可设置为动态的参数化数据集，可定义文本框、下拉框、日期框、时间框等类型的数据集参数，灵活筛选满足不同业务需求的数据。1、图表展示：支持 PC 端、移动端及大屏；
2023-06-12 11:20:53
7647
原创 LLVM 标准 C++ 排序算法
算法已经集成到 LLVM 标准 C++排序库中，使用强化学习的新算法替换掉了原有的 LLVM libc++ 标准排序 3、排序 4 和排序 5 算法，这些基础算法是 C++ 排序库的基本组件，通常被较大的排序算法多次调用。排序或散列这样的基本算法在任何一天都会被使用数万亿次1。随着计算需求的增长，这些算法的性能变得越来越重要。Nature 官网发表《
2023-06-11 11:08:17
192
原创 可视化的三种图结构方案 （canvas、fabric、G6）
G6 的内置节点包括 circle，rect，ellipse，diamond，triangle，star，image，modelRect，donut。G6 是一个简单、易用、完备的图可视化引擎，它在高定制能力的基础上，提供了一系列设计优雅、便于使用的图可视化解决方案。用canvas画图，首先要新建一个canvas画布，注意画布的宽高要在标签中设置，用css设置会导致图片变形。cubic-horizontal：水平方向的三阶贝塞尔曲线，不考虑用户从外部传入的控制点；
2023-06-06 09:50:11
930
原创 Linux 操作系统从L0到L4
衍生发行版（L4），基于 L3 优化改造，红旗发布 Open Cloud Linux V8.5、超凡桌面 SIG 发布 OC8.6 NDE 桌面版，逐渐形成衍生发行版（L4）。源社区（L1）是 Linux 内核+GNU 组件+其他开源组件的组合，聚焦了多方协同开发，投入大，但社区版本未经过大规模生产环境验证，非稳定版本，无法直接用于生产环境；OpenCloudOS 社区着力实现从源社区（L1）、商业版（L2）、到社区稳定版（L3）的全链路覆盖，输出经海量业务验证的企业级稳定操作系统版本。
2023-06-04 23:14:17
267
原创 图像去噪库-Open Image Denoise
Open Image Denoise 的目的是提供一个开放的、高质量的、高效的、易于使用的去噪库，使人们能够在基于光线追踪的渲染应用中大大减少渲染时间。特尔 Open Image Denoise 是一个开源的高性能、高质量的去噪过滤库，适用于使用光线追踪渲染的图像。英特尔 Open Image Denoise 是 oneAPI 渲染工具包的一部分，并在 Apache 2.0 许可下发布。采用 RDNA2（仅限 Navi 21）和 RDNA3（Navi 3x）架构的 AMD GPU。
2023-06-01 10:03:50
600
原创 Kubernetes 云原生 Gateway 网关
CNCF 对云原生的定义中提到了几个关键的点：1、强调应用环境的动态性，像公有云、私有云、混合云等新型的动态环境已成为大多数应用的首选；2、强调在跨多云部署应用时具备非云平台绑定的属性；3、还强调了弹性扩展、基于自动化手段快速部署和拉起等方面的重要性。
2023-05-28 13:28:47
1723
原创 WSL2 对 Linux 内核
Linux 内核特性，多代 LRU (Multi-Gen LRU, MGLRU)、用于编译器优化的 Profile Guided Optimizations (PGO)、用于虚拟 GPU 处理的 VirtIO-GPU、挂起到磁盘和 Google 的开发模型。比如下面的图片介绍了 WSA 的服务端、客户端与虚拟机之间的调用关系。WSL 2 的架构如下图所示，它使用了轻量级的虚拟机和完整的 Linux 内核，并且与 systemcall 完全兼容。
2023-05-27 23:51:11
244
原创 开源大语言模型完整列表
Large Language Model (LLM) 即大规模语言模型，是一种基于深度学习的自然语言处理模型，它能够学习到自然语言的语法和语义，从而可以生成人类可读的文本。LLM 通常基于神经网络模型，使用大规模的语料库进行训练，比如使用互联网上的海量文本数据。这些模型通常拥有数十亿到数万亿个参数，能够处理各种自然语言处理任务，如自然语言生成、文本分类、文本摘要、机器翻译、语音识别等。
2023-05-18 22:08:32
3727
原创 AWS开源 Cedar 和 SnapChange模糊测试工具
AWS 开源营销总监 David Nalley 表示，这两个项目都是 AWS 为开源社区贡献知识产权的持续努力的一部分。AWS 一直在使用 Cedar 为 IT 组织提供将授权策略编写为可部署在任何地方的代码的能力，在托管 AWS Verified Permissions 服务中使用最广泛。Cedar 是一种将权限定义为策略的语言，其中包括自动推理以从数学上证明 IT 环境是安全的。也是一种评估策略的规范。使用 Cedar 策略来控制你的应用程序的每个用户被允许做什么以及他们可以访问什么资源。
2023-05-13 16:51:54
208
原创 seL4 操作系统微内核生态-ACM协会
SeL4 是世界上第一个通过数学方法被证明安全的操作系统内核，并且在安全的基础上还强调高性能，是世界上最快、最先进的 OS 微内核。它对于嵌入式计算系统的安全可信赖方面将会有极大意义，具体来看可能影响到航空电子、自动驾驶汽车、医疗设备、关键基础设施与国防等行业。seL4 是 L4 微内核家族的成员，它为系统中运行的应用之间的隔离提供了最高级别保障，可以遏制系统某一部分的危害，并防止损害系统中其它可能更关键的部分。seL4 是一个安全操作系统内核，旨在确保现实世界中关键计算机系统的机密性、安全性和可靠性。
2023-05-09 13:36:07
352
原创 WEBPACK和ROLLUP构建前端工具库
• @rollup/plugin-node-resolve（rollup 插件，它使用节点解析算法定位模块，用于在节点模块中使用第三方 node_modules 包）• @rollup/plugin-typescript（rollup 插件，对 typescript 的支持，将 typescript 进行 tsc 转为 js）• @rollup/plugin-babel（rollup 插件，rollup 的 babel 插件，ES6 转 ES5）
2023-05-04 22:45:33
732
原创 QT菜单样式Ribbon Control for Qt, Office ribbon control
ribbon的自定义是ribbon的一个特色，参考了office和wps的自定义界面，用户可以为自己的ribbon定义非常多的内容，甚至可以定义出一个完全和原来不一样的界面。以下是office的自定义界面以下是wps的自定义界面office ribbon菜单样式的qt实现，支持office样式、wps样式等不同风格的ribbon ui切换，可通过qss自定义自己的风格。
2023-04-29 11:43:27
1418
原创 微软开源 JARVIS 用 ChatGPT 控制 AI 模型
由此便引入了一个概念：「语言是 LLM 连接 AI 模型的通用接口」。该系统提出了一种让 LLM 充当控制器的新方法，让 LLM 来管理现有的 AI 模型，来完成多模态的复杂 AI 任务，并且使用语言作为通用接口。该研究提出的 HuggingGPT 是一个利用 LLM 连接机器学习社区（例如 HuggingFace）中各种 AI 模型以解决复杂 AI 任务的系统。连接 LLM 和 AI 模型的协作系统。大型语言模型 (LLM) 当前的问题可能是迈向 AGI（通用人工智能）的第一步，也是关键的一步。
2023-04-05 11:31:12
3006
原创 BloombergGPT是金融领域的大型语言模型
BloombergGPT是一项全新的大型生成式人工智能（AI）模型，该大型语言模型（LLM）已专门针对广泛的金融数据开展训练，以支持金融行业内多样化的自然语言处理（NLP）任务。基于 LLM 的 AI 的最新进展已经在许多领域展示了令人兴奋的新应用，但金融领域的复杂性和独特术语需要一个特定领域的模型。由此生成的模型在现有的针对金融的 NLP 基准、一套彭博内部基准以及来自热门基准的通用 NLP 任务的广泛类别（如 BIG-bench Hard、知识评估、阅读理解和语言任务）上进行了验证。
2023-04-05 11:24:46
730
原创 Blender 3.5 全新逼真视觉效果
在雕刻模式下的绘图笔刷中，添加了对矢量置换贴图 (VDM) 笔刷的支持，提供了一种简单地创建复杂形状的方法。是一个免费和开源的 3D 计算机图形软件工具集，用于创建动画电影、视觉效果、艺术、3D 打印模型、交互式 3D 应用、VR 和计算机游戏。此版本内置了大量毛发类型，Essentials 资产库包含 26 种毛发资产，包括以下类别：变形、生成、导向、实用、读取和写入.新的基于 GPU 的合成器后端将 3D 视口体验提升到一个新的水平。全新的视口合成器、雕刻模式下的矢量置换、
2023-04-05 11:09:53
359
原创 Arduino Uno R4
Arduino UNO R4接口方面，它拥有一个 USB-C 接口，可用于连接 PC，相比旧型号上笨重的 USB Type-B 更加现代化。Arduino Uno R4 提供“Minima”（常规）和 Wi-Fi 版本可选，无线版本将配备支持 Wi-Fi 和蓝牙连接的 Espressif S3 模块。Arduino 是一款便捷灵活、方便上手的开源电子原型平台，主要包含硬件（各种型号的 Arduino 开发板）和软件（Arduino IDE)。Arduino Uno R4 与 R3 配置对比。
2023-04-05 11:03:08
944
原创 SQL 审计 Mybatis-Flex
Mybatis-Flex 是一个优雅的 Mybatis 增强框架，它非常轻量、同时拥有极高的性能与灵活性。我们可以轻松的使用 Mybaits-Flex 链接任何数据库，其内置的 QueryWrapper^ 亮点 帮助我们极大的减少了 SQL 编写的工作的同时，减少出错的可能性。 Mybatis-Flex v1.0.5 主要是添加了功能强大的 SQL 审计 功能。SQL 审计是一项非常重要的工作，是企业数据安全体系的重要组成部分，通过 SQL 审计功能为数据库请求进行全程记录，为事后追溯溯源提
2023-03-30 22:18:30
1368
原创 ALOHA是开源模仿学习能力机械臂
ALOHA 即 A Low-cost Open-source Hardware System for Bimanual Teleoperation，是一个低成本的开源双手遥控操作硬件系统，即开源机械臂，可用于双手远程操作机器人执行精细任务 (例如给线缆轧带或剥鸡蛋壳)、动态任务 (例如颠乒乓球) ，以及接触式丰富的任务 (例如给自行车上链条)，并且运行可靠，在整整 8 个月的测试中没有电机故障。而 ALOHA 开源了有关设置的所有内容（机械臂和 ACT 算法均已开源），并准备了详细教程，
2023-03-30 22:11:59
1366
原创 DarklangGPT AI 写代码AI/GPT
（但在小编看来，这也是它的弊端之一，用户使用 Dark 语言就只能绑定在它的开发平台上。DarklangGPT 成功推动 Darklang 语言向前发展，比如在类型系统方面取得了巨大进步、消除了技术债务、添加了语言功能、修复了不一致和运行时错误、改进了错误消息、还删除了新的不必要的语言功能，如类型化漏洞... 用 Paul Biggar 的原话来说就是 “在 2 月和 3 月取得的成就比过去两年的总和还多”。AI 生成代码，文本编辑器当然也是没有意义的东西。，一款专为 AI 编程而生的编辑器。
2023-03-30 22:03:12
112
原创 OpenFlamingo 多模态是GPT-4 开源替代品
OpenFlamingo 的整体架构图如下，可以看出技术细节上很大程度上是跟着 DeepMind 的 Flamingo 模型走，Flamingo 模型在包含交叉文本和图像的大规模网络语料库上进行训练，OpenFlamingo 同样是使用交叉注意力层来融合预训练的视觉编码器和语言模型。，这是一个用于训练和评估大型多模态模型 (LMM) 的框架，属于 DeepMind 的 Flamingo 模型（一种能够处理和推理图像、视频和文本的等多模态内容的框架）的开源复制品。
2023-03-30 21:52:32
1457
1
原创 Databricks 开源 LLM AI
该模型在一个 800GB 的开源文本数据集上进行训练，并且能够与类似规模的 GPT-3 模型相差无几。ChatGPT 和 Bard 这样的生成式 AI，小公司构建自己的模型，而不将数据通过 API 发送给专有模型背后的服务提供商，也可以保护小公司的敏感数据和专有的知识产权。Databricks 尽管模型小得多，只有 60 亿个参数，以及较小的数据集和训练时间（ChatGPT 的参数是 1750 亿个），但 Dolly 仍然表现出了 ChatGPT 所展示的同样的 "神奇的人类互动能力"
2023-03-30 21:45:19
415
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人