- 博客(48)
- 资源 (13)
- 收藏
- 关注
RSS订阅原创 C# 的文件读写方式汇总（学习心得 27）
当打开文件进行读写时，它变成一个 流。从根本上说，流是通过通信路径传递的字节序列。有两个主要的流：输入流 和 输出流。输入流用于从文件读取数据（读操作）输出流用于向文件写入数据（写操作）文章目录一、C# I/O 类二、FileStream 类三、C# 高级文件操作3.1 文本文件的读写3.1.1 StreamReader 类3.1.2 StreamWriter 类3.2 C# 二进制文件的读写3.2.1 BinaryReader 类3.2.2 BinaryWriter 类3.3 Win
2020-06-30 19:10:17
1618
原创 强化学习算法实现自动炒股
强化学习算法自动炒股本文利用强化学习算法 PG，来对股票市场的指数进行交易研究感兴趣的朋友可以在这个基础上导入其他市场的数据，添加 observation 的维度（本文仅使用了“当天收盘价”和“与前一天收盘价的差值”两个维度）操作 action 设置了 2 个维度 ：short 和 long添加多个维度的数据，再对多个股票进行算法训练，一定会使得该模型更具有鲁棒性，希望大家多多尝试百度深度学习算法库 PARL ，以及搭建股票测试环境的 gym-anytrading 网址附在下面，用起来感觉不错的可
2020-06-29 10:08:55
2500
原创 C# 异常处理（学习心得 26）
C# 异常处理时建立在四个关键词之上的：try、catch、finally 和 throw。try：一个 try 块标识了一个将被激活的特定的异常的代码块。后跟一个或多个 catch 块。catch：程序通过异常处理程序捕获异常。catch 关键字表示异常的捕获。finally：finally 块用于执行给定的语句，不管异常是否被抛出都会执行。例如，如果您打开一个文件，不管是否出现异常文件都要被关闭。throw：当问题出现时，程序抛出一个异常。使用 throw 关键字来完成。语法：try{
2020-06-28 20:47:51
497
原创 C# 正则表达式详解（学习心得 25）
正则表达式 是一种匹配输入文本的模式。.Net 框架提供了允许这种匹配的正则表达式引擎。使用以下字符，运算符，结构，来定义正则表达式：转义字符字符类定位点分组构造限定符反向引用构造备用构造替换杂项构造文章目录一、转义字符二、字符类三、定位点四、分组构造4.1 (?= subexpression) 详解4.2 (?! subexpression) 详解4.3 (?<=subexpression) 详解4.4 (?<!subexpression) 详解4.5 (?>
2020-06-28 20:45:07
1867
原创 C# 预处理器指令（学习心得 24）
预处理器指令：指导编译器在实际编译开始之前对信息进行预处理。所有的预处理器指令都是以 # 开始。在一行上，只有空白字符可以出现在预处理器指令之前。预处理器指令不是语句，所以它们不以 分号（;）结束。一个预处理器指令必须是该行上的唯一指令。文章目录一、C# 预处理器指令列表1.1 #define 预处理器1.2 条件指令二、预处理器指令的用途理解一、C# 预处理器指令列表C# 中可用的预处理器指令：预处理器指令描述#define它用于定义一系列成为符号的字符。#un
2020-06-28 20:21:35
427
原创 C# 命名空间 Namespace （学习心得 23）
命名空间的设计目的是提供一种让一组名称与其他名称分隔开的方式。文章目录一、定义命名空间二、using 关键字三、嵌套命名空间一、定义命名空间关键字 namespace 开始，后跟命名空间的名称。声明方法：namespace namespace_name{ // 代码声明}跨命名空间调用方式：namespace_name.item_name;例：using System;namespace first_space{ class namespace_cl {
2020-06-28 20:19:09
367
原创 C# 接口 Interface（学习心得 22）
接口定义了所有类继承接口时应遵循的语法合同。接口定义了语法合同 “是什么” 部分，派生类定义了语法合同 “怎么做” 部分。接口定义了属性、方法和事件，这些都是接口的成员。接口只包含了成员的声明。成员的定义是派生类的责任。接口提供了派生类应遵循的标准结构。接口使得实现接口的类或结构在形式上保持一致。抽象类在某种程度上与接口类似，但是，它们大多只是用在当只有少数方法由基类声明由派生类实现时。文章目录一、定义接口: MyInterface.cs二、接口实现：InterfaceImplementer
2020-06-28 20:14:50
487
原创 C# 运算符的重载（学习心得 21）
可以重定义或重载 C# 中内置的运算符。也可以使用用户自定义类型的运算符。通过关键字 operator 后跟运算符的符号来定义的。文章目录一、运算法重载的实现二、可重载和不可重载运算符一、运算法重载的实现例：重载 + 运算符，把我们需要的对象属性相加using System;namespace OperatorOvlApplication{ class Box { private double length; // 长度 private dou
2020-06-27 17:11:31
615
原创 C# 的静态多态性和动态多态性（学习心得 20）
同一个行为，具有多个不同表现形式或形态的能力。在面向对象编程范式中，多态性往往表现为"一个接口，多个功能"。多态性可以是静态的或动态的：静态多态性中，函数的响应是在 编译 时发生的。动态多态性中，函数的响应是在 运行 时发生的。在 C# 中，每个类型都是多态的，因为包括用户定义类型在内的所有类型都继承自 Object。同一个事件发生在不同的对象上会产生不同的结果。文章目录一、静态多态性1.1 函数重载二、动态多态性2.1 抽象类2.2 虚方法一、静态多态性在编译时，函数 和 对
2020-06-27 17:08:28
1085
原创 C# 的继承（学习心得 19）
继承允许我们根据一个类来定义另一个类，这使得创建和维护应用程序变得更容易，利于重用代码和节省开发时间。已有的类被称为的 基类，这个新的类被称为 派生类。继承的思想实现了 属于（IS-A） 关系。例如，哺乳动物 属于（IS-A） 动物，狗 属于（IS-A） 哺乳动物，因此狗 属于（IS-A） 动物。一、基类和派生类一个类可以派生自 多个 类或接口。语法：<访问修饰符符> class <基类>{ ...}class <派生类> : <基类>
2020-06-27 17:03:35
569
1
原创 强化学习算法 DDPG 进行四轴飞行器的速度控制
本文基于百度深度学习库 PARL 完成四轴飞行器的模拟器使用的是百度的 RLschool文章目录一、DDPG 算法的收敛问题探讨：1. 传统方法：2. 新思路探讨：二、安装依赖三、具体代码及解析：3.1 库引入3.2 超参数设置3.3 智能体 Agent 模块3.4 神经网络 Model行动网络 ActorModel评价网络 CriticModel综合网络3.5 训练函数3.6 测试函数3.7 搭建环境和模型架构3.8 加载模型，训练，测试一、DDPG 算法的收敛问题探讨：1. 传统方法：在传.
2020-06-27 16:59:13
3272
5
原创 C# 的类定义，构造函数和析构函数（学习心得 18）
类，相当于一个数据类型的蓝图。一、类的定义关键字 class 开始，形式如下：<access specifier> class class_name{ // member variables <access specifier> <data type> variable1; <access specifier> <data type> variable2; ... <access specif
2020-06-25 09:47:42
1374
原创 C# 枚举 enum（学习心得 17）
枚举是一组命名整型常量。枚举类型是使用 enum 关键字声明的。C# 枚举是值类型。枚举包含自己的值，且不能继承或传递继承。声明：enum <enum_name>{ enumeration list };参数：enum_name 指定枚举的类型名称。enumeration list 是一个用逗号分隔的标识符列表。枚举列表中的每个符号代表一个整数值，一个比它前面的符号大的整数值。默认情况下，第一个枚举符号的值是 0。例：using System;pu
2020-06-25 09:38:52
282
原创 C# 结构体（学习心得 16）
结构体，是 值类型 数据结构。使单一变量可以存储各种数据类型的相关数据。struct 关键字用于创建结构体。结构体用来代表一个记录。一、定义结构体声明方式：struct Books{ public string title; public string author; public string subject; public int book_id;}; 例：using System;using System.Text; struct Book
2020-06-25 09:37:13
434
原创 C# 字符串的定义及相关方法汇总（学习心得 15）
使用 string 关键字来声明一个字符串变量。string 关键字是 System.String 类的别名。一、创建 String 对象创建方法：给 String 变量赋值一个字符串通过 String 类的构造函数通过字符串的串联运算符（+）通过检索属性，或调用一个返回字符串的方法通过格式化方法，转换一个值或对象，为字符串表示形式例：using System;namespace StringApplication{ class Program {
2020-06-24 20:41:03
2861
原创 C# 的数组定义，访问，及相关方法汇总（学习心得 14）
一个存储相同类型元素的固定大小的顺序集合。一、声明数组语法：datatype[] arrayName;参数：datatype：元素的数据类型[]：表示数组（这里不能填写数组大小！）arrayName：数组名称例：double[] balance;二、初始化数组数组是一个引用类型。需要使用 new 关键词来创建数组实例，以达到初始化。例：double[] balance = new double[10];三、数组赋值创建一个数组时，C# 编译器会根据数组类型隐式初始化
2020-06-23 19:06:25
1070
原创 C# 的可空类型（Nullable），单问号，双问号（学习心得 13）
可空类型（Nullable），表示其基础值类型正常范围内的值，再加上一个 null 值。例如，Nullable< Int32 >，读作"可空的 Int32"，可以被赋值为 -2,147,483,648 到 2,147,483,647 之间的任意值，也可以被赋值为 null 值。类似的，Nullable< bool > 变量可以被赋值为 true 或 false 或 null。在处理数据库和其他包含可能未赋值的元素的数据类型时，将 null 赋值给数值类型或布尔型的功能特别有用。
2020-06-22 14:58:22
607
原创 强化学习入门（五）连续动作空间内，使用DDPG求解强化学习问题
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解文章目录一、离散动作 VS 连续动作1.1 区别1.2 神经网络修改1.3 激活函数选择二、DDPG（Deep Deterministic Policy Gradient）2.1 从 DQN 到 DDPG2.2 Actor-Critic 结构2.3 DDPG 的优化目标和最佳策略2.4 借鉴 DQN 中的目标网络 target network 和经验回放 ReplayMemory三、 PARL 库中 DDPG.
2020-06-21 16:19:19
7200
12
原创 强化学习算法 DDPG 解决 CartPole 问题，代码逐条详解
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解使用DDPG解决连续控制版本的CartPole问题，给小车一个力（连续量）使得车上的摆杆倒立起来。文章目录一、安装依赖二、导入依赖三、设置超参数四、搭建Model、Algorithm、Agent架构4.1 Model4.2 Algorithm4.3 Agent五、连续控制版本的CartPole环境六、设置经验池七、Training && Test（训练&&测试）八、创建环境.
2020-06-21 15:59:34
6768
2
原创 强化学习入门（四）策略梯度方法 Policy Gradient 求解强化学习问题
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解文章目录一、回顾 Value-based 和 Policy-based1.1 基本概念1.2 区别二、Policy Gradient 算法2.1 随机策略中的 softmax 函数2.2 一局游戏 episode2.3 轨迹的期望回报2.4 优化策略函数三、采样方式：REINFORCE3.1 蒙特卡洛 MC 与 时序差分 TD3.2 REINFORCE 算法四、数据处理技巧4.1 简单场景的图片预处理4.2 .
2020-06-20 14:35:57
4867
6
原创 强化学习算法 Policy Gradient 解决 CartPole 问题，代码逐条详解
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解强化学习算法 DQN 解决 CartPole 问题，移动小车使得车上的摆杆保持直立。这个游戏环境可以说是强化学习中的 “Hello World”大部分的算法都可以先利用这个环境来测试下是否可以收敛环境介绍：小车在一个导轨上，无摩擦地来回移动，车上有一根杆子，可以绕着小车上的一个点旋转，所以我们要做的是，通过推动小车往左或者往右，来确保杆子不倒终止条件：杆子角度大于 +/-12度车.
2020-06-20 14:18:07
2427
原创 LaTex 求和
$p = \sum_{n=1}^Na_n$显示：p=∑n=1Nanp = \sum_{n=1}^Na_np=∑n=1Nan
2020-06-20 10:22:29
10776
原创 强化学习算法 DQN 解决 CartPole 问题，代码逐条详解
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解强化学习算法 DQN 解决 CartPole 问题，移动小车使得车上的摆杆保持直立。这个游戏环境可以说是强化学习中的 “Hello World”大部分的算法都可以先利用这个环境来测试下是否可以收敛环境介绍：小车在一个导轨上，无摩擦地来回移动，车上有一根杆子，可以绕着小车上的一个点旋转，所以我们要做的是，通过推动小车往左或者往右，来确保杆子不倒终止条件：杆子角度大于 +/-12度车.
2020-06-19 14:01:31
7026
3
原创 强化学习入门（三）将神经网络引入强化学习，经典算法 DQN
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解文章目录一、为什么要引入神经网络二、DQN 算法2.1 DQN 约等于 Q-learning + 神经网络2.2 DQN 的两大创新2.2.1 经验回放 Experience replay2.2.2 固定 Q 目标 Fixed Q target2.3 DQN 流程框架图2.4 PARL 的 DQN 框架一、为什么要引入神经网络Q 表只能解决少量状态的问题，如果状态数量上涨，那我们面对的可能性呈现指数上涨，.
2020-06-19 13:51:08
9374
2
原创 LaTex 底标
$\max \limits_{a<x<b}{f(x)}$显示：maxa<x<b{f(x)}\max \limits_{a<x<b}\{f(x)\}a<x<bmax{f(x)}
2020-06-19 09:50:15
3556
原创 LaTex 帽子汇总
$\hat{A}$A^\hat{A}A^$\widehat{A}$A^\widehat{A}A$\tilde{A}$A~\tilde{A}A~$\widetilde{A}$A~\widetilde{A}A$\overline{A}$A‾\overline{A}A$\underline{A}$A‾\underline{A}A$\overbrace{A}$A⏞\overbrace{A}A$\underbrace{A}$A⏟\underbrace{A}A$\overset{a}
2020-06-19 09:19:30
11442
原创 强化学习算法 Sarsa 解迷宫游戏，代码逐条详解
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解强化学习算法 Sarsa 解迷宫游戏文章目录一、安装依赖库二、导入依赖库三、智能体 Agent 的算法：Sarsa四、训练和测试语句五、创建环境，实例化Agent，启动训练和测试五、结果分析一、安装依赖库安装强化学习算法中环境库 Gympip install gym二、导入依赖库import gymimport numpy as npimport time # 用于延时程序，方便渲染画面.
2020-06-18 23:01:13
2855
2
原创 强化学习入门（二）强化学习MDP四元组，Q表格的概念和更新策略
本文内容源自百度强化学习 7 日入门课程学习整理感谢百度 PARL 团队李科浇老师的课程讲解文章目录一、强化学习MDP四元组1.1 状态转移概率1.2 如何描述环境1.3 Mode-free 试错探索二、Q 表格1.1 Q 值表格概念1.2 Q 表格的目标导向型1.3 实践：悬崖问题（快速到达目的地）三、强化学习更新 Q 表格3.1 Temporal Difference 时序差分（TD单步更新）3.2 与环境交互四、相关方法和策略4.1 Epsilon Greedy 方法4.2 On-Policy.
2020-06-18 22:23:02
4562
原创 C# 方法的定义，调用，和参数传递（学习心得 12）
用来执行一个任务的语句块。每个 C# 程序至少有一个 Main 方法。使用方法需要：定义方法。调用方法。文章目录一、定义方法二、调用方法三、递归方法调用四、参数传递4.1 按值传递参数4.2 按引用传递参数4.3 按输出传递参数一、定义方法语法：<Access Specifier> <Return Type> <Method Name>(Parameter List){ Method Body}参数：Access Specifier：
2020-06-18 19:13:00
1358
1
原创 强化学习入门（一）强化学习的基础概念及Gym库，Parl库介绍
文章目录一、强化学习初印象二、什么是强化学习三、GYM库（环境库）四、PARL库（算法库）一、强化学习初印象让机器像人一样学习：对已知环境进行规划对未知环境进行探索/试错案例：Multi-Agent Hide and Seek，OpenAI 的 AI 多角色捉迷藏游戏地址：http://openai.com/blog/emergent-tool-use参考资料：《Reinforcement Learning: An Introduction》伯克利 2018 Deep RL 课程：h
2020-06-17 19:20:40
3402
2
原创 C# 的封装方式：public，private，protected，internal，protected internal（学习心得 11）
把一个，或者多个项目，封闭在一个物理，或者逻辑的包中。C# 封装，可设置访问权限，通过 访问修饰符 来实现。访问修饰符，定义一个类成员的范围和可见性。C# 支持的访问修饰符：public：所有对象都可以访问。private：对象本身在内部进行访问。protected：该类，及其子类可以访问。internal：同一程序集的对象可以访问。protected internal：当前程序集，或派生自包含类的类型。一、public一个类的成员变量和成员函数，可被外部的类访问。using S
2020-06-16 19:23:16
1111
原创 C# 循环语句：while，for，foreach，do while，break，continue，嵌套循环，无限循环（学习心得 10）
满足一定条件下，多次执行同一块代码。一、循环类型1.1 while 循环语法：while(condition){ statement(s);}condition 可以是任意的表达式，当为任意非零值时都为真。例：using System;namespace Loops{ class Program { static void Main(string[] args) { /* 局部变量定义 */
2020-06-15 19:36:24
2022
原创 C# 的判断语句 if else循环，switch 循环，嵌套判断语句（学习心得 9）
判断条件是否成立，成立则执行 A，不成立则执行 B（可选）。一、判断语句1.1 if 语句语法：if(boolean_expression){ /* 如果布尔表达式为真将执行的语句 */}例：using System;namespace DecisionMaking{ class Program { static void Main(string[] args) { /* 局部变量定义 */
2020-06-14 15:02:49
1023
原创 C# 的算数运算符，关系运算符，逻辑运算符，位运算符，赋值运算符，其他运算符（学习心得 8）
内置数学/逻辑运算符分类：算数运算符关系运算符逻辑运算符位运算符赋值运算符其他运算符文章目录一、算数运算符二、关系运算符三、逻辑运算符四、位运算符五、赋值运算符六、其他运算符七、运算符优先级一、算数运算符C# 中支持的算数运算符列表：运算符描述实例（A=1，B=2）+把两个操作数相加A + B 将得到 3-从第一个操作数中减去第二个操作数A - B 将得到 -1*把两个操作数相乘A * B 将得到 2/分子除以分母B / A 将
2020-06-13 18:01:51
680
原创 C# 的常量类别汇总，及常量的定义方式（学习心得 7）
常量是固定值。可为任何基本数据类型：整数，浮点数，字符串等。一、整数常量前缀：十进制：没有前缀八进制：前缀为 0十六进制：前缀为 0x 或 0X后缀：unsigned：后缀 U 或 u（表示无符号）long：后缀 L 或 l（表示 64 位有符号整数类型）多个后缀可任意顺序组合例：212 // 合法，整型215u // 合法，无符号整型0xFeeL // 合法，十六进制整形（0～F 代表 0～15）078 // 非
2020-06-12 19:44:59
1388
原创 C# 变量的定义，初始化，赋值（学习心得 6）
变量：即存储区的名字，以便程序进行操作。每个变量有类型：值类型，引用类型，指针类型等。类型决定内存大小和布局。一、变量定义变量定义语法：<data_type> <variable_list>;例：int i, j, k;char c, ch;float f, salary;double d;二、变量初始化语法：variable_name = value;也可以在定义变量的时候，同时初始化：<data_type> <variable
2020-06-11 20:38:20
3780
原创 C# 的类型转换（显式/隐式）及内置类型转换方法汇总（学习心得 5）
把 数据 从一种 类型 转化为 另一种 类型。有 2 种形式：隐式类型转换：默认的安全方式，不会导致数据丢失。显式类型转换：需要强制类型转换运算符，会造成数据丢失。显式类型转换案例：using System;namespace TypeConversionApplication{ class ExplicitConversion { static void Main(string[] args) { double d
2020-06-10 11:36:25
661
原创 C# 的数据类型：值类型 Value types，引用类型 Reference types，指针类型 Pointer types（学习心得 4）
变量 分为 3 种类型：值类型（Value types）引用类型（Reference types）指针类型（Pointer types）一、值类型（Value types）这个类型的变量，可以赋值。该类型变量从类 System.ValueType 得到。可用的值类型：类型描述范围默认值bool布尔值True 或 FalseFalsebyte8 位无符号整数0 到 2550char16 位 Unicode 字符U +0000 到 U +f
2020-06-09 18:41:12
1455
百度开源的深度强化学习框架PARL源代码
2020-06-16
超级强大的流程图，脑图，架构图，网络结构图绘制工具 mac 版 draw.io-13.0.3.dmg
2020-05-31
word2vec-google-news-300.zip.010
2020-05-30
word2vec-google-news-300.zip.009
2020-05-30
word2vec-google-news-300.zip.008
2020-05-30
word2vec-google-news-300.zip.007
2020-05-30
word2vec-google-news-300.zip.006
2020-05-30
word2vec-google-news-300.zip.005
2020-05-30
word2vec-google-news-300.zip.004
2020-05-30
word2vec-google-news-300.zip.003
2020-05-30
word2vec-google-news-300.zip.002
2020-05-30
word2vec-google-news-300.zip.001
2020-05-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人