安的博客

原创 networkx 读取txt或gml中的复杂网络数据

复杂网络中经典的数据集的格式基本上是gml或txt格式，而要使用这些经典的数据集，像adjnoun、Jazz、karate、polbooks、Yeast等，则需要先将其转化为图的格式。本人小白一枚，想记录下学习过程中的收获与问题。还望大家多多指教~# -*- coding: utf-8 -*-import networkx as nx#抽取txt中的数据def read_txt(d...

原创 【斯坦福21秋（李沐）】实用机器学习（学习笔记）——1.1课程介绍

一、概述 Industral ML：主要是讲机器学习在工业中的应用。不管哪个行业在使用了机器学习后，收入都有一定程度的增长。（source McKinesy，2019）二、机器学习在工业界的应用制造：预测设备是否需要维护、生产的产品质量控制等 零售：商品推荐、客服机器人、预测产品销量等 健康：实时监测健康状态并报警、疾病判定等 金融：欺诈的检测、借贷资格认定等 汽车：预测车辆是否需要保养、自动驾驶等三、 引言eg：房屋售价预测机器学习工作流：挑战：1、问题抽...

原创 计算机网络基础知识（一）——传输介质简介（来源：华为）

计算机网络基础知识（一）——传输介质简介前言学习目标传输介质概念常见介质1. 同轴电缆2. 双绞线3. 光纤4. 串口电缆冲突域和双工模式1. 冲突域2. 双工模式前言通信网络除了包含通信设备本身之外，还包含连接这些设备的传输介质，如同轴电缆、双绞线和光纤等。不同的传输介质具有不同的特性，这些特性直接影响到通信的诸多方面，如线路编码方式、传输速度和传输距离等。学习目标了解一些常见的传输介质理解冲突域和双工模式的基本概念传输介质概念终端可以产生、发送和接收数据，网络是终端建立通信的媒介

原创 python数据分析新手入门课程学习——（七）模型结果评估（来源：慕课网）

本章主要介绍以下四方面内容：一、分类模型评估1. 二分类把二分类的一个类叫做二分类中的正类（用1表示），另一个叫负类（用0表示）。一般来说，正类是我们更加关注的类，如HR表中是否离职就是我们关注的。所以如果员工近期离职，我们就可以把它叫正类；而其他未离职员工的样本叫做负类。如果拿测试集数据来说，我们得到的真实数据的标注：数据经过一个模型的计算，我们可以得到该模型的输...

原创 python数据分析新手入门课程学习——（八）回顾与多角度看数据分析（来源：慕课网）

一、课程总结二、多角度数据分析除了以上介绍的思路以外，其实我们还可以从多个角度进行数据分析的解读。1.从目的角度来看描述性任务：直接获取能代表数据特征的指标，我们需要了解的就是这些指标。断因类任务： 常结合目的来看。如：分析你的男朋友为什么不理你或生气了，我们就需要获取他生气前后的行为特征和环境特征进行分析，得到和生气相关性最大的特征。预测类任务：根据已有的数据特征...

原创 python数据分析新手入门课程学习——（六）机器学习与建模（来源：慕课网）

 机器学习根据是否有标注可以分为以下三类。监督学习（有标注的机器学习过程，标注相当于告诉模型在什么样的数据特征下应该输出什么样的结果，机器学习的任务就是提炼出输入与标注间的关系，并进行预测。）根据标注是离散值还是连续值。监督学习又可以分为“分类”（离散值）和“回归”。非监督学习（无标注）。半监督学习（部分有标注，部分无标注其中有标注的数据可以作用于无标注的数据，规范与引导聚类的方向;同时无标注...

原创 python数据分析新手入门课程学习——（五）特征工程概述（数据预处理）（来源：慕课网）

机器学习：计算机根据经验（数据）自动化做出决策的过程最终机器学习达到一种状态，是当我们输入数据后，他能根据我们之前的训练或我们定义的目标输出我们想要的结果，这个过程其实就像一个函数一样。我们数据或者需求就是机器学习主体的输入，而这个主体的输出就是我们想要的结果。我们把学习机器主体叫做数据模型。数据模型是个函数，也是机器学习学习状态的体现。数据模型并不是由人搭建起来的系统，它来源于数据，由数据构...

原创 python数据分析新手入门课程学习——（四）探索性数据分析（复合分析）（来源：慕课网）

基于之前的理论学习来进行属性间的数据分析 1.交叉分析我们得到一张数据表，直观最有的两个分析切入点：1）从列的角度进行分析，分析每个属性的特点并进行归纳和总结;2）从行的角度进行分析（从案例的角度），尤其当数据有了标注了的时候，以标注为关注点，案例分析越多，也就越接近数据整体的质量。这两种分析忽略了数据属性间的关联性，有时并不能得到最为真实客观的结论。故用到交叉分析...

原创 python数据分析新手入门课程学习——（四）探索性数据分析（多因子）（来源：慕课网）

一，理论铺垫1.假设检验与方差检验假设检验：根据一定的假设条件从样本推断总体，或者推断样本与样本之间关系的一种方法我们换个说法来解释假设检验，就是做出个假设，然后根据数据或已知的分布性质来。推断这个假设成立的概率有多大具体过程如下： 例子： 假设检验的方法有很多，方法这些差别的一般取决于检验统计量的选取上。如，μ检验法（检验一个样本，如上述例子），卡方检验（检验两个因素...

原创 python操作MySQL数据库——（二）

原创 python操作MySQL数据库——（一）MySQL基础知识

1.MySQL数据库介绍MySQL是一个关系型数据库管理系统，由瑞典MySQL AB公司开发，目前属于Oracle公司.MySQL是一种关联数据库管理系统，关联数据库将数据保存在不同的表中，而不是将所有数据库在一个大仓库内，这样就增加了速度并提高了灵活性。MySQL的的是开源的，所以你不需要支付额外的费用。 MySQL的的支持大型的数据库。可以处理拥有上千万条记录的大型数据库。 MyS...

原创 数据库简单介绍

数据库分类：1.关系型数据库++ MariaDB：MySQL的一个分支，学了MySQL之后，更容易上手。++ SQLite：嵌入式数据库，它很小（几k，几M，几十M）可嵌入到手机上，pc上，随时可以移动。++其他的是大型数据库。2.非关系型数据库的NoSQL分类：1）文档型：没有“性”这个字段可以不存，有就可以存上（例子中的数据结构叫做json）    ...

原创 python数据分析新手入门课程学习——（二）探索分析与可视化（来源：慕课网）

 一，单因子与对比分析可视化数据import pandas as pd df = pd.read_csv('./HR.csv') #查看前十条数据 df.head(10) 以下为显示的结果我们可以看出：第一个属性satisfaction_level（满意度）的取值应该是在0-1之间;last_evaluation（最近一次的评价）也是在0-1...

原创 python数据分析新手入门课程学习——（一）数据获取（来源：慕课网）

一，流程                         二，数据分析概述 含义与目标：使用统计分析方法，在数据中提取有用的信息并进行总结与概括的过程。三，使用工具蟒蛇语言以及numpy的，SciPy的，matplotlib，scikit学习，熊猫等工具包注意：学习过程中要勤于查阅 A、数据获取手段1.数据仓库（DW）：将所有业务数据经汇总处理构成     ...

原创 python数据分析新手入门课程学习——（三）使用matplotlib和seaborn画图（来源：慕课网）

一，导入数据import pandas as pdimport numpy as npimport seaborn as snsimport matplotlib.pyplot as pltdf = pd.read_csv("./HR.csv")# 去除异常值df =df.dropna(how="any",axis=0)df = df[df["last_evaluation"]...

原创 “实验楼"中的2048小游戏复现

#-*- coding:utf-8 -*-import cursesfrom random import randrange,choicefrom collections import defaultdict#所有的有效输入转换为“上下左右，重置，退出”这六种行为，用actions表示actions=['Up','Left','Down','Right','Restart','Ex...