- 博客(34)
- 收藏
- 关注
RSS订阅原创 零基础入门CV赛事- 街景字符编码识别Task5
上篇描述了pytorch模块，其实应该多写一点模型的调参和算法的改善。这里描述一下，机器学习的最后一部分内容，也就是集成学习，也被称为模型融合。集成学习(Ensemble learning)通过构建并结合多个学习器来完成学习任务，有时也被称为多分类器系统、基于委员会的学习等。集成学习的一般结构为：先产生一组“个体学习器”，再用某种策略将它们结合起来。集成中只包含同种类型的个体学习器，称为同质，当中的个体学习器亦称为“基学习器”，相应的算法称为“基学习算法”。集成中包含不同类型的个体学习器，称为“异质”，
2020-06-02 11:11:02
363
原创 零基础入门CV赛事- 街景字符编码识别Task4
这部分内容应该是以模型的训练以及调参为主，继上一篇神经网络介绍之后，这篇不主要将模型的训练和调参的方法，这篇讲讲pytorch模块的相关内容，毕竟。pytorch这个才是这次内容的重点模块。1.简介PyTorchPyTorch是Facebook发布的一款非常具有个性的深度学习框架，它和Tensorflow，Keras，Theano等其他深度学习框架都不同，它是动态计算图模式，其应用模型支持在运行过程中根据运行参数动态改变，而其他几种框架都是静态计算图模式，其模型在运行之前就已经确定。2.PyTo
2020-05-30 22:58:20
349
原创 零基础入门CV赛事- 街景字符编码识别Task3
继上篇的数据的读取，这里介绍介绍计算机视觉关键的一步。识别模型的构建。说到视觉识别模型肯定少不了卷积神经网络（cnn）。这里重点介绍cnn神经网络。1.简介卷积神经网络的发展1979和1980年发表的论文中，福岛仿造生物的视觉皮层（visual cortex）设计了以“neocognitron”命名的神经网络。neocognitron是一个具有深度结构的神经网络，并且是最早被提出的深度学习算法之一。1987年由Alexander Waibel等提出的时间延迟网络（Time Delay Neural
2020-05-26 13:19:31
572
原创 零基础入门CV赛事- 街景字符编码识别Task2
这里，继上篇对题目理解之后，又一篇，对数据的读取。这里写的内容更多的是图片数据，当然也包括json数据。不再赘述题目中图片怎样读取图片，与之相关的内容会在后面使用这块中写出。跟上篇一样，先简要介绍一下涉及的库与模块，主要的他对于机器学习的作用与意义。1.数据读取的相关模块的简介PillowPIL库可以完成图像归档和图像处理两方面功能需求。图像归档：对图像进行批处理、生成图像预览、图像格式转换等；图像处理：图像基本处理、像素处理、颜色处理等。OpenCV一款强大的跨平台的计算机视觉库，使用它能
2020-05-23 21:18:36
466
原创 零基础入门CV赛事- 街景字符编码识别Task1
在阿里天池拿到任务，总体判断大赛目标和走向。街景字符编码识别，从题目看就是计算机视觉的赛题。下面聊聊，我从拿到题目下来对赛题的理解。1.赛题数据与实际的理解从天池平台下载下来包括3个zip压缩文件，两个json文件，和一个CSV数据文件。zip压缩文件是一些png的图片文件，也是机器学习的主要文件，分别为训练集，验证集，和预测集。大概看了一下图片，数字的大小，数量，位置，方向各不一样。不过，好处就在大赛为了降低难度，已经用json文件告知你图片的大小，位置和图片的内容的范围。如下000000.png
2020-05-20 12:13:48
443
原创 模型融合
Datawhale 零基础入门数据挖掘-Task5，赛题：零基础入门数据挖掘 - 二手车交易价格预测，地址：https://tianchi.aliyun.com/competition/entrance/231784/introduction?spm=5176.12281957.1004.1.38b02448ausjSX目的数据调参之后进行的数据模型融合，进而得出实验数据结果模型融合...
2020-04-04 21:16:51
248
转载 Django 优秀资源大全
Awesome Django版权:https://github.com/haiiiiiyun/awesome-django-cn介绍Awesome-Django是由Roberto Rosario发起和维护的 Django 资源列表。该列表收集了大量 Django 相关的优秀应用、项目等资源，方便了 Django 用户参考查阅。Django 优秀资源大全则是依据Awes...
2020-04-02 11:56:56
457
原创 建模调参
Datawhale 零基础入门数据挖掘-Task4 ，赛题：零基础入门数据挖掘 - 二手车交易价格预测，地址：https://tianchi.aliyun.com/competition/entrance/231784/introduction?spm=5176.12281957.1004.1.38b02448ausjSX目的当我们建立好机器学习模型后，预测数据会与我们期望的有所偏差，这时...
2020-04-01 16:05:51
244
原创 特征工程
打卡Datawhale数据挖掘学习，数据挖掘之二手车交易价格预测，该内容来自 Datawhale与天池联合发起的“0基础入门系列”特征工程。https://tianchi.aliyun.com/competition/entrance/231784/introduction目标对于特征进行进一步分析，并对于数据进行处理，完成对于特征工程的分析，并对于数据进行一些图表或者文字总结。将数据转换...
2020-03-27 17:33:50
125
原创 探索性数据分析（EDA，Exploratory Data Analysis）
打卡Datawhale数据挖掘学习，数据挖掘之二手车交易价格预测，该内容来自 Datawhale与天池联合发起的“0基础入门系列”赛事第一场。https://tianchi.aliyun.com/competition/entrance/231784/introduction分析赛题，昨晚天池直播，借用今天群里大佬分享的两张图，很明显解释分析两个字的重点。第一张图总体分析了一下。很精炼，也很有...
2020-03-24 18:18:42
1140
原创 Django开发“ 'X-Frame-Options' to 'deny'“报错处理
在Django开发过程中出现报错Refused to display 'http://127.0.0.1:8000/index/welcome.html' in a frame because it set 'X-Frame-Options' to 'deny'.由于借用的是开源模板，百度查询到的问题是frame架构中间人攻击的相关bug，但是全是Java的解决方案。找了好久，在谷歌上找到...
2020-03-20 10:46:14
3982
4
原创 Python中出现:RunTimeError:implement_array_function method already has a docstring
Python中出现:RunTimeError:implement_array_function method already has a docstring这种报错在最近的学习出现，网上好多解决方案都是你抄我我抄你的，没有什么实际意义。所以总结一下。pip list查看一下安装的包，一般来说是安装的numpy这个包的问题。并不是版本问题。问题状况：用terminal运行pytho...
2020-03-10 12:31:07
2659
转载 dbms_aq和dbms_aqadm有关问题
本例要求指定的角色和权限（除了标准CREATE SESSION/TABLE/PROCEDURE/TYPE和表空间配额外）1、AQ_ADMINISTRATOR_ROLE： 用于创建队列表和队列；2、EXECUTE ON DBMS_AQ：用于通知案例中启用PLSQL存储过程编译另外，需要入列/出列消息的标准应用用户要求AQ权限通过DBMS_AQADM[GRANT|REVOKE]_QUEUE_PRIVI...
2018-05-24 17:51:22
2665
原创 MySQL连接2059报错问题
MySQL版本是8.0.4由于新版本的MySQL新特性导致的。mysql> select Host,User,plugin from mysql.user;+-----------+------------------+-----------------------+| Host | User | plugin |
2018-05-09 12:00:50
14499
原创 docker查看映射卷目录报错
在对docker容器进行操作时，需要对docker容器内文件进行改动，查看映射卷时出现报错：# docker inspect --format '{{.Volumes}}' redis-master Template parsing error: template: :1:2: executing "" at <.Volumes>: map has no entry for...
2018-04-12 11:21:20
4321
原创 MegaCli对Unconfigured(good), Spun Up的外来磁盘修复
安装MegaClirpm -ivh MegaCli-8.07.08-1.noarch.rpm /opt/MegaRAID/MegaCli/MegaCli64 -PDList -aALL -NoLog|grep "Firmware state"Firmware state: Online, Spun UpFirmware state: Online, Spun UpFirmware state...
2018-04-11 11:40:37
10180
1
原创 运用zabbix通过OMSA组件对服务器硬件监控
最近有点惰性，做了OMSA对硬件的监控，后面有时间把做个Python web应用，把资产统计起来，做到自动收集资产。现在讲讲zabbix监控的详情。资源在github上：https://github.com/templeydy/zabbix-omsa.git直接使用git clone就可以下载。下面主要记录zabbix硬件监控的具体细节，防止以后忘记。至少现在还能记得。我把UserParamete...
2018-04-10 13:11:09
1075
原创 CPU0704报错处理
CPU0704报错的处理：报错代码：CPU0704 CPU1 machine check error detected. Power cycle system.第一反应CPU有问题。进bios查看系统硬件日志也显示同样的信息。处理方案：1.将电源线拔掉，然后放电几秒。2.重启系统，升级bios版本及其他硬件版本。3.报错消失，暂时较为稳定。姑且认为是硬件版本问题，有待讨论。记录此次事件，防止以后发...
2018-03-20 11:21:04
13322
1
转载 海子的诗-以梦为马(祖国)
我要做远方的忠诚的儿子 和物质的短暂情人 和所有以梦为马的诗人一样 我不得不和烈士和小丑走在同一道 路上 万人都要将火熄灭 我一人独将此 火高高举起 此火为大 开花落英于神圣的祖国 和所有以梦为马的诗人一样 我借此火得度一生的茫茫黑夜 此火为大 祖国的语言和乱石投筑 的梁山城寨 以梦为土的敦煌——那七月也会寒冷 的骨骼 如雪白的柴和坚硬的条条白雪 横 放在众神之山 和所有以梦为马的诗人一样 我投入...
2018-03-16 13:44:03
2472
1
转载 dmidecode命令
原文链接：http://man.linuxde.net/dmidecodedmidecode命令可以让你在Linux系统下获取有关硬件方面的信息。dmidecode的作用是将DMI数据库中的信息解码，以可读的文本方式显示。由于DMI信息可以人为修改，因此里面的信息不一定是系统准确的信息。dmidecode遵循SMBIOS/DMI标准，其输出的信息包括BIOS、系统、主板、处理器、内存、
2018-02-07 14:32:06
485
转载 DELL 服务器硬件资源上报-OMSA系统命令介绍
原文链接：http://blog.51cto.com/wuyanc/1864030常用命令指南1.omreport：查看组件状态命令1）命令用法# omreport -? #查看omreport一级子命令about Product and version properties.licenses Displays the digital licens...
2018-02-07 14:27:27
1507
原创 OMSA在Linux系统上安装及使用
OMSA命令部分参考：http://blog.51cto.com/wuyanc/1864022Dell OpenManage Server Administrator (OMSA)是一款全面的一对一系统管理解决方案。OMSA专为系统管理员设计，可用于管理本地系统及网络中的远程系统。OMSA提供了一个全面的一对一系统管理解决方案包，可使系统管理员专注于整个网络的管理工作。OMSA可分为两种：
2018-01-29 17:21:19
3341
原创 系统上升级bios
系统上升级bios，环境：dell 服务器DSU升级，又称DELL EMC System Update,支持Linux和windows操作系统，主要可用于一下方面：1.BIOS和fireware升级2.OpenManager 软件This release of DELL EMC System Update (DSU) supports the following new f
2018-01-24 10:09:04
3321
转载 Linux系统下安装MegaCli64工具查看和管理raid卡
原文链接：http://blog.csdn.net/lufeisan/article/details/53398756http://blog.chinaunix.net/uid-25135004-id-3139293.htmlMegaCli是一款管理维护硬件RAID软件，可以通过它来了解当前raid卡的所有信息，包括 raid卡的型号，raid的阵列类型，raid 上各磁盘状态，等等。通常，我们对...
2017-11-17 11:55:51
1533
转载 linux下多版本python环境配置
原文出自：http://www.178linux.com/870221. 依赖pyenv安装使用git# yum install git -y# yum -y install gcc make patch gdbm-devel openssl-devel sqlite-devel readline-devel zlib-devel bzip2-devel2. 创建用
2017-11-17 10:40:06
1516
原创 rsync同步yum源
编写同步脚本/usr/bin/rsync -avrt --bwlimit=8000 --delete --exclude-from="file_exclude" rsync://mirrors.tuna.tsinghua.edu.cn/centos/ /data/servers/yum/centos/ &>>/data/servers/update_yum_source.log &
2017-11-16 15:02:13
1705
原创 django虚拟环境搭建
虚环境的安装与使用pip install virtualenvcd [项目所在的目录]virtualenv venv虚拟环境安装的组件./venv/bin/pip install django==1.8.2启动虚拟环境source ./venv/bin/activate退出虚拟环境deactivate
2017-11-16 14:57:40
184
转载 lvm逻辑卷的建立、扩容和减容等操作方法
原文链接:http://www.server110.com/linux/201403/7132.html前言的介绍:LVM是逻辑盘卷管理（Logical Volume Manager）的简称，它是Linux环境下对磁盘分区进行管理的一种机制，LVM是建立在硬盘和分区之上的一个逻辑层，来提高磁盘分LVM区管理的灵活性。前面谈到，LVM是在磁盘分区和文件系统之间添加的一个逻辑层，来
2017-11-08 16:54:00
540
原创 locate无法使用
没有locate命令locate工具需要mlocate这个包，安装ok执行locate出现报错：locate: can not stat () `/var/lib/mlocate/mlocate.db': No such file or directory原因mlocate.db文件没有加载，需要手动加载，此时执行updatedb更新/var/lib/mlo
2017-10-31 12:06:19
1604
原创 fabric模块报错问题
安装fabric模块，安装过程正常，在运行时报错：pip install fabric正常>>> from fabric.api import runTraceback (most recent call last): File "", line 1, in File "/usr/lib64/python2.7/site-packages/fabric/api.p
2017-10-24 13:25:42
4921
原创 安装psutil报错问题
pip install psutil报错： creating build/temp.linux-x86_64-2.7 creating build/temp.linux-x86_64-2.7/psutil gcc -pthread -fno-strict-aliasing -O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fe
2017-10-23 09:42:42
9540
1
原创 安装redmine部分问题过程详解
安装redmine部分问题过程详解，安装rails的问题这里就不贴出来了。安装ruby，rails，我这里安装的是redmine3.3，系统环境ruby 2.2.8p477，Rails 4.2.6，mysql Ver 14.14 Distrib 5.6.37。ruby源码包：https://ruby-china.org/wiki/install_ruby_guide我这里采用源码编译
2017-09-25 17:42:00
712
原创 centos系统split命令切割大文件
1. split分割a. 可以按行数进行分割 split -l 500 file.txt new_fileb. 可以按文件大小分割 split -b 2G yum.tz new_yum2. cat合并cat new_yum* > yum.tz
2017-09-19 09:50:50
2060
转载 oracle字符集的查看与修改（转）
一、什么是Oracle字符集 Oracle字符集是一个字节数据的解释的符号集合,有大小之分,有相互的包容关系。ORACLE 支持国家语言的体系结构允许你使用本地化语言来存储，处理，检索数据。它使数据库工具，错误消息，排序次序，日期，时间，货币，数字，和日历自动适应本地化语言和平台。影响Oracle数据库字符集最重要的参数是NLS_LANG参数。它的格式如下: NLS_LANG = la...
2017-04-26 15:04:10
608
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人