- 博客(105)
- 收藏
- 关注
RSS订阅转载 敏捷AI | NLP技术在宜信业务中的实践【智能聊天机器人篇】
本文将介绍NLP技术在宜信应用的高级场景：智能聊天机器人。一、高级场景之智能聊天机器人前文我们介绍了NLP技术、数据、服务上相关演化发展的过程，接下来，我将结合两个具体的实例来分享我们在NLP领域的一些实施经验。...
2019-09-02 11:33:41
379
转载 5分钟了解lucene全文索引
一、Lucene介绍及应用Apache Lucene是当下最为流行的开源全文检索工具包，基于JAVA语言编写。目前基于此工具包开源的搜索引擎，成熟且广为人知的有Solr和Elasticsearch。2010年后Lucen...
2019-08-30 11:36:48
169
转载 【须弥SUMERU】宜信分布式安全服务编排实践
一、概要1.分布式安全服务编排概念2.须弥(Sumeru)关键实现思路3.应用场景二、前言在笔者看来，安全防御的本质之一是增加攻击者的攻击成本，尤其是时间成本。那么从防御的角度来说，如何尽早和及时地发现...
2019-08-29 17:31:12
163
转载 云端数据仓库的模式选型与建设
数据，对一个企业的重要性不言而喻，如何利用好企业内部数据，发挥数据的更大价值，对于企业管理者而言尤为重要。作为最传统的数据应用之一，数据仓库在企业内部扮演着重要的角色，构建并正确配置好数据仓库，对于数据分析工作至关重要。一个设计...
2019-08-29 10:36:47
112
转载 如何运用PHP+REDIS解决负载均衡后的session共享问题
一、为什么要使用Session共享？稍大一些的网站，通常都会有好几个服务器，每个服务器运行着不同功能的模块，使用不同的二级域名，而一个整体性强的网站，用户系统是统一的，即一套用户名、密码在整个网站的各个模块中都是可以登录使用...
2019-08-28 15:59:17
153
转载 DNS域名解析服务及其配置
一、背景到 20 世纪 70 年代末，ARPAnet 是一个拥有几百台主机的很小很友好的网络。仅需要一个名为 HOSTS.TXT 的文件就能容纳所有需要了解的主机信息：它包含了所有连接到 ARPAnet 的主机名字到地址...
2019-08-27 11:56:57
155
转载 解密“CDO-首席数据官”的价值、挑战及发展
数据，不论形态、格式和类型，已经迅速成为企业最有战略意义的资产；数据资产已经成为了可以形成业务洞察及优势的战略资源，数据的体量、多样性和复杂性也正以指数级增长。就像其他重要的企业资产，数据需要适当的管理和治理水平, 以确保它的潜...
2019-08-26 11:31:12
84
转载 Container及其内部进程监控剖析
目前市场上的虚拟化技术种类很多，例如moby(docker)、LXC、RKT等等。在带来方便应用部署和资源充分利用的好处的同时，如何监控相应Container及其内部应用进程成为运维人员不可避免遇到的新情况。UAV.Contai...
2019-08-23 14:25:49
111
转载 公司为什么需要建立一套统一的开发框架？
一、起因：野蛮生长近十年，中国互联网发展的速度越来越快，互联网科技颠覆了越来越多的传统行业，我们的衣食住行随着互联网科技的进步，发生了翻天覆地的变化。在这个大潮中，越来越多新兴的公司如雨后春笋般的冒了出来，他们的业务增长非常...
2019-08-22 10:51:04
103
转载 当年用httpclient时踩过的那些坑
一、前言httpclient是java开发中最常用的工具之一，通常大家会使用其中比较基础的api去调用远程。长期开发爬虫，会接触httpclient不常用的api，同时会遇到各式各样的坑，本文将总结这些年遇到的坑及相应的解决...
2019-08-21 14:49:33
1090
转载 十步法原则解决数据质量问题
一、相关概念1.1 数据质量数据的一组固有属性满足数据消费者要求的程度。1）数据固有属性真实性：即数据是客观世界的真实反映及时性：即数据是随着变化及时更新的相关性：即数据是数据消费者关注和需要的2...
2019-08-21 14:09:21
493
转载 企业使用数据库的12种姿势
数据库，作为IT系统的基础类软件，发挥着非常巨大的作用。那么企业在使用数据库时，有什么样的方式可以选择？不同方式又各有其什么特点呢？本文将从使用方式、适用场景、未来发展、成本因素（人力、财务、时间）及风险点等多角度分析十二种情况...
2019-08-20 18:32:15
121
转载 回归架构本质，重新理解微服务
第一部分：微服务的诞生、演变以及应用策略记者：近几年来，微服务架构设计方式被提出并在越来越多的企业中得以实践和落地，但对于刚开始接触微服务的人来说，还是不知道要从哪些方面开始了解。您能否结合软件架构的发展历史，聊聊微服务...
2019-08-20 11:22:09
69
转载 贷前系统ElasticSearch实践总结
贷前系统负责从进件到放款前所有业务流程的实现，其中涉及一些数据量较大、条件多样且复杂的综合查询，引入ElasticSearch主要是为了提高查询效率，并希望基于ElasticSearch快速实现一个简易的数据仓库，提供一些OLA...
2019-08-19 18:08:20
96
转载 中间件增强框架之InterceptFramework
一、前言在智能运维中，应用服务所使用的组件及JAR包等相关信息非常重要，这些信息能够清晰地描绘一个应用服务的骨架，我们称这些信息为应用画像。在UAVStack中，中间件增强框架（MOF）下的InterceptFr...
2019-08-19 10:42:31
70
转载 UAVStack的慢SQL数据库监控功能及其实现
UAVStack是一个全维监控与应用运维平台。UAV.Monitor具备监控功能，包含基础监控、应用/服务性能监控、日志监控、业务监控等。在应用监控中，UAV可以根据应用实例画像；其中应用实例组件可以对日志、服务、客户端等进...
2019-08-16 16:54:59
97
转载 调用链系列（4）：服务信息上下文传递
在之前的调用链系列文章中，我们已经对调用链进行了详细介绍，相信大家已经对调用链技术有了基本的了解。拓展阅读：调用链系列（1）：解读UAVStack中的贪吃蛇调用链系...
2019-08-16 10:37:33
132
转载 UAV心跳机制与容器、进程数据采集
服务心跳机制主要用于确认服务的存活状态，UAVStack的心跳数据还负责上报节点的容器及进程监控数据，支持在前端实时查看应用容器和进程的运行状态，并根据这些数据对容器和进程做出预警。一、背景...
2019-08-15 11:00:53
156
转载 调用链系列（3）：如何从零开始捕获body和header
拓展阅读：调用链系列（1）：解读UAVStack中的贪吃蛇调用链系列（2）：轻调用链实现在Java中，HTTP协议的请求/响应模型是由Servlet规范+Servlet容器（如To...
2019-08-15 10:48:10
82
转载 调用链系列（2）：轻调用链实现
一、前言调用链系列（1）：解读UAVStack中的贪吃蛇上篇文章分享了一下调用链的模型设计及模型时序图。相信大家通过上一篇文章对调用链有了一个整体上的了解，如：调用链是什么、能做什么及整体实现...
2019-08-14 12:00:04
143
转载 调用链系列（1）：解读UAVStack中的贪吃蛇
一、背景对于分布式在线服务，一个请求需要经过多个系统中多个模块，可能多达上百台机器的协作才能完成单次请求。这种场景下单靠人力无法掌握整个请求中各个阶段的性能开销，更无法快速的定位系统中性能瓶颈。当发生故障时通常需...
2019-08-13 17:45:24
72
转载 UAV MOF工作原理之Agent注入机制原理
一、前言MOF（Moniter Framwork）作为UAV应用数据捕获框架，不但实现了对应用无侵入的数据捕获，而且在框架层面实现了功能的灵活控制，并且保证了良好的可扩展性，在UAV中具有举足轻重的地位。...
2019-08-13 12:12:05
182
转载 专访宜信张军：一切技术创新都要以赋能业务为目标
在软件研发从业者的视角里，创新分为两种：一种是与软件研发技术相关的创新，特别是在大数据和AI这种快速发展的领域，需要保持与技术进步的同频；而另一种创新，是与公司业务相关的，不断运用技术实现自动化、智能化、规范化，...
2019-08-13 10:52:05
117
转载 微服务与网关技术（SIA-GateWay）
一、背景软件架构，总是在不断的演进中...把时间退回到二十年之前，当时企业级领域研发主要推崇的还是C/S模式，PB、Delphi这样的开发软件是企业应用开发的主流。随着时间的推移，基于浏览器的B/S架...
2019-08-12 11:48:12
152
转载 四要素落地持续交付
一、什么是持续交付持续交付（Continuous delivery，缩写为 CD），是一种软件工程方法，让软件产品的产出过程在一个短周期内完成，以保证软件可以稳定、持续的保持在随时可以发布的状况。它的目标在于让软...
2019-08-09 10:49:15
125
转载 UEM“探针”技术及用户体验管理
随着互联网产品越来越多，用户群体越来越庞大以及用户品位的多样性增加，我们会发现这样的一个规律，就是相同类型的产品，比如播放器中的QQ影音和暴风影音，再比如小游戏平台中的腾讯游戏和联众等等，他们的功能是相同的或者是...
2019-08-08 10:42:14
1533
转载 Redis进阶应用：Redis+Lua脚本实现复合操作
一、引言Redis是高性能的key-value数据库，在很大程度克服了memcached这类key/value存储的不足，在部分场景下，是对关系数据库的良好补充。得益于超高性能和丰富的数据结构，Redis已成为当...
2019-08-07 13:28:41
77
转载 一个项目的SpringCloud微服务改造过程
SSO是公司一个已经存在了若干年的项目，后端采用SpringMVC、MyBatis，数据库使用MySQL，前端展示使用Freemark。今年，我们对该项目进行了一次革命性的改进，改造成SpringCloud架构，并且把前后端...
2019-08-06 09:29:18
977
转载 宜信开源|手把手教你创建第一个Davinci应用
Davinci既可作为公有云/私有云独立使用，也可作为可视化插件集成到三方系统。用户只需在可视化UI上简单配置即可服务多种数据可视化应用，并支持高级交互/行业分析/模式探索/社交智能等可视化功能。大数据可视平...
2019-08-05 17:27:22
93
转载 中间件增强框架之-CaptureFramework框架
一、背景应用服务监控是智能运维系统的重要组成部分。在UAV系统中，中间件增强框架（MOF）探针提供了应用画像及性能数据收集等功能，其中数据收集功能主要采集四类数据：实时数据、画像数据、调用链接...
2019-08-05 12:00:40
56
转载 关系型数据库全表扫描分片详解
导读：数据总线（DBus）专注于数据的实时采集与实时分发，可以对IT系统在业务流程中产生的数据进行汇聚，经过转换处理后成为统一JSON的数据格式（UMS），提供给不同数据使用方订阅和消费，充当数仓平台、大数据分析平台、实时报...
2019-08-02 10:46:25
64
转载 AI中台——智能聊天机器人平台的架构与应用（分享实录）
内容来源：宜信技术学院第3期技术沙龙-线上直播|AI中台——智能聊天机器人平台主讲人：宜信科技中心AI中台团队负责人王东导读：随着“中台”战略的提出，目前宜信中台建设在思想理念及架构设计上都已...
2019-08-01 11:59:22
1279
转载 通过OpenGL理解前端渲染原理（1）
一、OpenGLOpenGL，是一套绘制3D图形的API，当然它也可以用来绘制2D的物体。OpenGL有一大套可以用来操作模型和图片的函数，通常编写OpenGL库的人是显卡的制造者。我们买的显卡都支持...
2019-07-31 11:05:17
77
转载 基于可视化配置的日志结构化转换实现
导读：数据总线DBus的总体架构中主要包括六大模块，分别是：日志抓取模块、增量转换模块、全量抽取程序、日志算子处理模块、心跳监控模块、Web管理模块。六大模块各自的功能相互连接，构成DBus的工作原理：通过读取RDBMS...
2019-07-31 10:28:23
95
转载 宜信开源|大数据可视洞察Davinci的安装与配置攻略
Davinci既可作为公有云/私有云独立使用，也可作为可视化插件集成到三方系统。用户只需在可视化UI上简单配置即可服务多种数据可视化应用，并支持高级交互/行业分析/模式探索/社交智能等可视化功能。一、...
2019-07-30 14:44:59
1631
转载 快速部署DBus体验实时数据流计算
一、环境说明说明all in one是一个单机版本dbus环境，是给用户快速体验dbus的功能，只是一个简单体验版，不能用于其它环境或者用途，具体包括如下：1）基础组建：zookeep...
2019-07-30 11:58:06
120
转载 基于kubernetes自研容器管理平台的技术实践
一、容器云的背景伴随着微服务的架构的普及，结合开源的Dubbo和Spring Cloud等微服务框架，宜信内部很多业务线逐渐了从原来的单体架构逐渐转移到微服务架构。应用从有状态到无状态，具体来说将业务状态数据如：...
2019-07-29 11:04:28
258
转载 iOS开发如何避免安全隐患
现在很多iOS的APP没有做任何的安全防范措施，导致存在很多安全隐患和事故，今天我们来聊聊iOS开发人员平时怎么做才更安全。一、网络方面用抓包工具可以抓取手机通信接口的数据。以Charles为...
2019-07-29 10:10:50
51
转载 iOS中基于协议的路由设计
一、背景前段时间对我们自己的App做了结构上的重构，抛弃了之前简单的MVC开发模式，原因是随着App的业务线越来越多，单个页面的功能越来越复杂，MVC开发模式导致整个Controller-layer的代码越来越多...
2019-07-25 13:56:18
74
转载 DBus数据库表结构变更处理方案
导读：DBus是我们要介绍的在敏捷大数据（Agile BigData）背景下的第一个平台。企业中大量业务数据保存在各个业务系统数据库中，为同时解决数据同步的一致性和实时性问题，DBus（数据总线）平台应运而生。D...
2019-07-25 10:50:59
185
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人