Macropodus-CSDN博客

近年来异步web服务器比较火热，例如falcon/bottle/sanic/aiohttp，今天也来玩玩sanic。Sanic是一个支持Python 3.7+的web服务器和web框架，速度很快。它允许使用Python 3.5中添加的async/await语法，无阻塞且快。Sanic也符合ASGI，目标是提供一种简单的方法来建立和运行一个高性能的HTTP服务器，该服务器易于构建、扩展。

2023-06-09 10:29:11 3089

原创大模型 LLM 综述, A Survey of Large Language Models

一般认为NLP领域的大模型>=10 Billion参数(也有人认为是6B、7B, 工业界用, 开始展现涌现能力);经典大模型有GPT-3、BLOOM、Flan-T5、GPT-NeoX、OPT、GLM-130B、PaLM、LaMDA、LLaMA等;大模型时间线, 图来自，下同。

2023-06-08 10:29:53 2967

原创不乱码、下载 Transformers 模型 (抱抱脸、model)

目的: 因为需要对预训练模型等做一些查看、转移操作，不想要乱码，不想频繁下载模型等;

2023-04-13 17:11:46 2034

原创国产开源类ChatGPT模型，ChatGLM-6b初步微调实验

chatglm-6b微调/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu。

2023-03-22 11:07:14 8795 6

原创 python3写一个http接口服务(url, get, post)，接口限流、拒绝访问

接口限流(rate-limit)，笔者最近工作中，遇到提供给客户的算法微服务，遇到大量请求挂掉了，除了扩容负载均衡外，也采取了限流的方式。一般来说，常见的接口限流，我们可以采用。

2023-02-28 18:54:50 2200

# 国产开源ChatGPT模型对比(大雾)## 概述为什么要做国产开源ChatGPT模型对比呢(大雾)，答案显而易见嘛。最近尤其是这阵子ChatGPT爆火, 2月3日在ChatGPT推出仅两个月后，它在2023年1月末的月活用户已经突破了1亿，成为史上用户增长速度最快的消费级应用程序。而要达到这个用户量，TikTok用了9个月，Instagram则花了2年半的时间。作为一款聊天机器人，凭借大规模预训练模型GPT3.5(~100B参数)、指令微调尤其是人类反馈强化学习微调(RLHF,OpenAI在强化

2023-02-09 23:50:20 8199

原创 pytorch模型(.pt文件)转tensorflow(.pb文件)

需求: pytorch1.x的模型(.pt文件)转tensorflow1.x/2.x的模型(.pb文件—savedmodel格式);目的: pytorch进行实验等, tf-serving部署最后的模型;

2022-12-14 18:00:53 2087

原创文档理解-layoutxlm-layoutlmv3

# 文档理解-layoutxlm-layoutlmv3-实验## 一、总结-summary - layoutxlm/layoutlmv3模型比较敏感, 不怎么稳定, 尤其是对lr很敏感, 2e-5至5e-5;

2022-10-26 08:56:38 2389

原创多模态概述

多模态学习可以聚合多源数据的信息，使得模型学习到的表示更加完备。潜表示空间的质量决定了多模态模型的效果，数据量达到一定规模，模态种类越完整，多模态模型的效果越好。

2022-08-03 10:14:39 5378

原创由国内知名企业开源人工智能项目想到的

6、反倒是一些初创企业开源意愿较强，也是宣传和证明自己技术实力的一种方式吧，例如CV领域的AI四小龙中的商汤、旷视，又比如NLP领域的追一科技和香侬科技。4、不过与大众印象中阿里国内最强的开源互联网企业不同，阿里在AI领域的开源并不活跃，在CV、NLP似乎也见不到阿里的经典项目和论文。3、相较于创业公司，大公司开源动力更强，不过与美国头部互联网公司相比，国内公司的实力确实是不强，有影响力的项目更是少之又少。1、国内开源尤其是AI开源确实不太活跃，相对于企业，更多的可能是大学和个人。.........

2022-08-02 16:52:56 675

原创计算机视觉CV-目标检测OB

目标检测，也称目标提取，是计算机视觉四大基础任务之一（分类、定位、检测、分割），是一种基于目标几何和统计特征的图像分割。目的是对图像上的预定目标进行分割和识别，通俗来说就是检测图像中有什么，以及在哪里，通常用矩形框圈定目标。传统机器学习时代，目标检测经典算法大都基于滑动窗口、人工特征提取等技术手段，代表算法有VJ检测器、HOG行人检测器和DPM检测器等；深度学习时代大放异彩的卷积神经网络也被引入目标检测任务并大放异彩，实现了真正意义上的工业级使用。...

2022-07-27 10:32:52 1274

原创计算机视觉CV-骨干网络Backbone

2012-2022是深度学习集中爆发的10年,在这10年间,涌现出许许多多的新技术新理论，尤其是在骨干网络上。ConvNet-1989接近现代卷积神经网络CNN了，它具有两个特征（专利），一个是跨步卷积（strided-convolution），另一个是独立池化层（Pool）。基于该网络架构的系统被用于用于手写邮政编码识别。LenNet-5是一个简单的浅层卷积神经网络，激活函数为sigmoid，其输入INPUT为3232像素的单通道图像；第一个block的卷积层C1为6个53最大池化(步长2),...

2022-07-27 10:29:07 2765

原创序列标注理解

经典序列标注算法模型的区别,即贝叶斯NB,隐马尔科夫HMM,逻辑回归LR,最大熵隐马尔科夫MEMM,条件随机场CRF。

2022-07-27 09:43:36 238

原创 python3写一个http接口(UI界面), 给别人调用5--pywebio

还尝试了一下pywebio,好像是国内的个人项目,github上有3.2star。

2022-07-26 00:15:50 1083

原创 python3写一个http接口(UI界面), 给别人调用4--streamlit

首先推荐streamlit,streamlit是一种低代码方案,即快速构建和共享数据应用程序。说人话就是傻瓜式构建UI界面,做个人demo很方便。在github上star已经超过20k了。美国云计服务商雪花-Snowflake在2022年8亿美元收购了sreamlit公司。只是没想到有一天也会用上低代码工具。...

2022-07-26 00:14:44 1354

原创 mmdetection使用记录汇总

最近需要用到多模态尤其是CV方面的知识, 所以学习和使用了一下mmdetection和其他CV项目, 总结记录下遇到的各种问题, 以便往后查阅。mmdetection版本为当前最新的2.24.1, 总的安装见mmdetection/requirements.txt, 实际上包括requirements/build.txt/optional.txt/runtime.txt/tests.txt四个文件的包,建议手动安装, 尤其是涉及的torch、mmcv-full、opencv-python、detectro

2022-07-05 14:32:51 890

原创文本内容安全审核

短文本过滤实例，可用于智能识别各种违法违规内容，如涉黄、涉政、暴恐、辱骂、广告、灌水…当前监管越发严重，如何避免用户发布的内容给平台造成风险，内容安全审核是避规内容风险的主要方式。内容安全审核一般分为机审和人审两种方式并行的策略，各云厂商一般已经集成成接口服务，包括文本、图像、语音、视频等，同时也支持私有化部署。本文只调研关于文本的内容安全审核，文本和图像还是可以自己做的。功能：提供图片、视频、文本、语音、网页等形式内容违规检测API，覆盖暴恐、涉政、涉黄、广告、辱骂、不良场景等风险检测能力。技术：鉴

2022-07-05 14:29:16 8788

原创中文短语抽取/挖掘

中文短语抽取/挖掘概述短语抽取/挖掘(phrase extract/mining, 以下统称短语提取)是信息处理中领域的一项基本任务，但短语抽取与短语挖掘还是有些许不同。短语挖掘侧重于挖掘，一个常见的场景是半自动/自动从生语料中抽取/挖掘出高质量的短语，形成短语词典，提供给下游使用，这更多叫做短语挖掘。而短语抽取更关注抽取，侧重于无条件抽取应用，类似关键词抽取那样，使用者无条件抽取一篇文章中的短语，例如通用NLp工具中HanLP1.x的函数extract_phrase。短语抽取/挖掘与新词发现类似

2022-03-05 19:53:48 2571

chinese_word_segment_data.rar

( Redis-x64-3.2.100.msi

空空如也