qq_39270840-CSDN博客

转载 JEESZ分布式框架之技术介绍文档

摘要: Jeesz主要定位于互联网企业架构，已内置企业信息化系统的基础功能和高效的代码生成工具，包括：系统权限组件、数据权限组件、数据字典组件、核心工具组件、视图操作组件、工作流组件、代码生成等。采用分层设计、双重验证、提交数据安全编码、密码加密、访问验证、数据权限验证。 Jeesz目前包括以下模块项目，后台系统管理系统，RestFul独立服务系统、Scheduler定时调度系统、内容管理（CM...

2018-06-28 17:28:04 147

转载 XGBOOST原理解析

1.引言最近，因为一些原因，自己需要做一个小范围的XGBoost的实现层面的分享，于是干脆就整理了一下相关的资料，串接出了这份report，也算跟这里的问题相关，算是从一个更偏算法实现的角度，提供一份参考资料吧。这份report从建模原理、单机实现、分布式实现这几个角度展开。在切入到细节之前，特别提一下，对于有过GBDT算法实现经验的同学（与我有过直接connection的同学，至少有将四位同学都...

2018-06-28 17:26:58 377

转载【翻译】Sklearn与TensorFlow机器学习实用指南 ——第12章设备和服务器上的分布式TensorFlow（上）

在第 11 章，我们讨论了几种可以明显加速训练的技术：更好的权重初始化，批量标准化，复杂的优化器等等。但是，即使采用了所有这些技术，在具有单个 CPU 的单台机器上训练大型神经网络可能需要几天甚至几周的时间。在本章中，我们将看到如何使用 TensorFlow 在多个设备（CPU 和 GPU）上分配计算并将它们并行运行（参见图 12-1）。首先，我们会先在一台机器上的多个设备上分配计算，然后在多...

2018-06-28 17:25:07 172

转载理解事务的4种隔离级别

个人博客:blog.marschariot.com转自:https://blog.csdn.net/qq_33290787/article/details/51924963数据库事务的隔离级别有4种，由低到高分别为Read uncommitted 、Read committed 、Repeatable read 、Serializable 。而且，在事务的并发操作中可能会出现脏读，不可重复读，幻读...

2018-06-28 17:24:20 128

转载性能优化公式与实践

前言“性能优化“相信是每个程序员都关心的问题，在实际工作中也常会对系统做优化。关于性能优化有两个问题很值得探讨：HOW：影响性能的因素很多，该从何入手？找到需要优化的点后，如何进行优化？WHY：优化后为什么能提升性能？为什么有些优化点更值得做？至于WHAT，我认为是不言而喻的，性能优化的终极目标只有两点：QPS和RT，可以说所有优化最终都是为了这两个指标。本文讨论的核心内容是几个与性能相关的公式，...

2018-06-28 17:23:50 1482

转载 Metaspace泄漏排查

一、案件背景近日，一个线上应用开始频繁报警：异常日志、接口rt超时、load高、tcp重传率高等等。现场监控如下：从基础监控来看，cpu使用率不算特别异常，而load高说明等待cpu资源的线程队列长，配合rt上涨来看，推测是线程出现了堆积，而线程堆积一般有两种情况：线程内部处理耗时变长：比如缓存未命中、被下游请求block、慢sql、循环逻辑耗时等。JVM因GC、锁擦除等jvm操作原因触发stop...

2018-06-28 17:22:36 902

转载【神经网络本质是多项式回归】Jeff Dean等论文发现逻辑回归和深度学习一样好

起因是以色列理工学院工业工程与管理学院的助理教授 Uri Shalit 在 Twitter 上发文，指出这篇论文的补充材料里，有一处结果非常值得注意：标准化逻辑回归实质上与深度神经网络一样好。Uri Shalit 的研究方向是将机器学习应用于医疗领域，尤其是在向医生提供基于大型健康数据的决策支持工具方面。其次，他也研究机器学习和因果推断的交集，重点是使用深度学习方法进行因果推断。在加入以色列理工学...

2018-06-28 17:21:13 628

转载参数使用小技巧

在报表开发过程中，我们经常会用参数对数据进行过滤查询，具体的实现方式通常是在sql语句中where部分定义好针对哪个字段进行过滤，之后参数模板将不同的值传递给这个字段进行数据查询，返回不同的结果集供报表展现使用。常规的参数使用在教程文档中已经有介绍，这里不做赘述，小编今天只给大家分享两个一般人不知道的小技巧，能够提高报表开发效率及灵活性：数值为空查询全部数据动态参数（宏）怎么用技巧一：参数值为空时...

2018-06-28 17:20:38 106

转载在ECS上轻松搭建RDS的从实例

场景由于一些特殊的原因，某燃气公司线下ECS上需要在ECS上搭建一套从库，需要同步RDS数据库的数据(mysql5.7版本)。实现RDS for mysql与线下ECS上自建数据库数据实时同步，阿里云官方推荐使用DTS方式进行。原因有两个：1、mysql-bin正常情况下,RDS在本地只保存18个小时2、当RDS实例切换时，会影响自建ECS数据同步(这个经过测试可以排除)一方面考虑到使用DTS工具...

2018-06-27 17:31:12 465

转载使用jQuery Jcrop 图像裁剪无法更换图片的解决方案

因为公司需求，之前的一个老项目需要完成一个显示屏定制的业务，用户自主上传图片然后在线裁剪的功能，我选择了jQuery Jcrop这个插件。先看看怎么使用使用方法载入 CSS 文件<link rel="stylesheet" href="jquery.Jcrop.css">载入 JavaScript 文件<script src="jquery.js"></scrip...

2018-06-27 17:30:24 718

转载扫盲人工智能的计算力基石--异构计算

人工智能有三要素：算法，计算力，数据。我们今天主要来讲讲计算力。计算力归根结底由底层芯片提供。按照计算芯片的组成方式，可以分成：同构计算：使用相同类型指令集和体系架构的计算单元组成系统的计算方式。异构计算：使用不同类型指令集和体系架构的计算单元组成系统的计算方式。常见的计算单元类别包括CPU、GPU、ASIC、FPGA等。我们从CPU开始，讲一个小故事来帮助你理解一切。异构厨房系统：有一个大厨（C...

2018-06-27 17:28:51 121

转载设备上报二进制数据在云端配置JS脚本解析

1. 阿里云IoT控制台配置1.1 开通阿里云IoT物联网套件IoT物联网套件官网地址1.2 创建高级版产品，选择数据透传1.3 添加产品属性定义属性名标识符数据类型温度temperaturefloat湿度humidityfloat1.4 自定义payload二进制格式1位2-5位6-9位9-13位005b0232e14120000042b00000commandrequestIdtemperat...

2018-06-27 17:28:09 494

转载 10分钟虚拟设备接入阿里云IoT平台实战

1. 准备工作1.1 注册阿里云账号使用个人淘宝账号或手机号，开通阿里云账号，并通过实名认证(可以用支付宝认证)1.2 免费开通IoT物联网套件产品官网 https://www.aliyun.com/product/iot1.3 软件环境Nodejs安装 https://nodejs.org/en/download/编辑器 sublimeText/nodepad++/vscode2. 开发步骤2....

2018-06-27 17:27:00 2922 1

转载设备上报数据规则流转FC推送钉钉群

1.IoT云端开发开通物联网套件 https://www.aliyun.com/product/iot=>产品管理>创建产品=>产品管理>产品详情>设备管理>添加设备=>产品管理>产品详情>设备管理>添加自定义属性 tag，imei属性名key属性值value描述tag西溪园区 1-2-56自定义设备位置imeiXIXI201803453...

2018-06-27 17:25:57 271

转载消息服务实时消费设备状态变化和数据

0.准备工作0.1 注册阿里云账号使用个人淘宝账号或手机号，开通阿里云账号，并通过实名认证(可以用支付宝认证)0.2 免费开通IoT物联网套件IoT套件产品官网 https://www.aliyun.com/product/iot消息服务官网 https://mns.console.aliyun.com/#/list/cn-shanghai0.3 软件环境Nodejs安装 https://node...

2018-06-27 17:24:45 363

转载 IoT终端设备数据流转到消息服务MNS队列

在IoT场景中，我们业务服务器会有实时获取设备上报的消息，感知设备上下线状态变化的需求，通过配置服务端订阅将数据转到消息服务MNS队列，然后从MNS队列中即可获取这些数据。阿里云IoT物联网套件配合消息服务MNS来提供服务端订阅设备消息的功能，这种方式优势是MNS可以保证消息的可靠性，避免了服务端不可用时的消息丢失，同时MNS在处理大量消息并发时有削峰填谷的作用，保证服务端不会因为突然的并发压力导...

2018-06-27 17:23:36 1079

qq_39270840的博客