架构师之路18年精选100篇

架构师之路,2018精选索引,以方便大家查询。


【分布式架构】

架构,为什么要做服务化?

架构,如何进行容量设计?

架构,关于负载均衡的一切

架构,反向代理与DNS轮询

架构,过载保护与异构服务器负载均衡

架构,MySQL主从延时怎么优化?


分布式基础,通俗易懂CAP

分布式基础,两阶段提交

分布式基础,分布式事务

分布式基础,冗余数据一致性

秒杀业务,架构之外,业务折衷?


【业务架构设计】

Google File System 架构启示

Google MapReduce到底解决什么问题?

Google MapReduce有啥巧妙优化?

Google MapReduce架构设计

Google MapReduce,颠覆了互联网分层架构的本质

互联网分层架构的本质

Google BigTable到底解决什么问题?


多点登录,消息漫游,架构设计

离线消息,怎么保证不丢失?

消息顺序性,到底怎么保证?

群聊架构,为什么这么复杂?


系统通知,究竟是推送还是拉取?

状态同步,究竟是推送还是拉取?

网页消息,究竟是推送还是拉取?

群已读回执,究竟是推送还是拉取?

群消息,究竟存一份还是多份?

feed流,究竟什么是读扩散?

feed流,究竟什么是写扩散?


【架构与运维技巧】

DB误删快速恢复,DBA从此不再跑路

rm -rf *  了咋办,跑路吗?

如何进行无损发布,从此不用凌晨上线

服务挂了,怎么自动恢复?


监控告警,集群信息管理先行

监控告警,分级告警策略

多维度立体化监控

一分钟搞定“http接口”监控框架

一分钟搞定“log”监控框架

一分钟搞定“用户视角”监控


nohup与&到底有啥用?

tail -f为啥看不到已答应的日志?

chmod 755 究竟是什么鬼?

磁盘满了,为啥du却显示还有很大空间?

php怎么搞长连接?


【数据结构与算法】

拜托,面试别再问我TopK了!

拜托,面试别再让我数1了!

拜托,面试别再问我斐波那契数列了!

拜托,面试别再问我时间复杂度了!

拜托,面试别再问我基数排序了!》

拜托,面试别再问我计数排序了!

拜托,面试别再问我桶排序了!

拜托,世界上最漂亮的排序算法!

拜托,面试别再问我最大值最小值了!


暴力法,求解“微信群覆盖”

染色法,求解“微信群覆盖”

链表法,求解“微信群覆盖”

并查集,求解“微信群覆盖”


从电影推荐开始,聊协同过滤

从职位推荐开始,聊内容推荐

从啤酒与尿布,聊关联规则推荐

我不是潘金莲,聊相似性推荐

“相同距离,不同价格”里的个性化推荐


【数据库】

58到家MySQL军规升级版

数据库索引,到底是什么做的?

MyISAM与InnoDB的索引差异究竟是啥?

InnoDB,为何并发如此之高?

快照读,在RR和RC下的差异

InnoDB插入自增列,是表锁吗?

InnoDB并发插入,会不会互斥?

InnoDB,select为何会阻塞insert?

InnoDB如何巧妙实现,事务的4种隔离级别?

别废话,各种SQL到底加了什么锁?

超赞,InnoDB调试死锁的方法!

MySQL不为人知的主键与唯一索引

InnoDB的五项最佳实践,知其所以然

MySQL5.6,InnoDB的一些新特性


【缓存】

进程内缓存究竟怎么玩?

选redis还是memcache,源码怎么说?

缓存服务,你真的用对了么?

缓存,究竟是淘汰,还是修改?

Cache Aside Pattern

或许,应该先淘汰缓存?

缓存与数据库不一致,怎么办?

主从数据库不一致,怎么办?

到底选redis还是memcache,面试官究竟想考察啥?


【区块链】

1分钟了解区块链的本质

1分钟了解挖矿本质

如何保证区块链的一致性

如何保证区块链匀速生成

1分钟了解比特币


【带团队】

不要轻易放弃任何一个队友

指导队友,一定得言传身教

队友沟通,强势未必是好事

带团队,应该把队友推向前台

评优,别太在意投票的结果

多数票,是个悖论

如何应对boss需求

高情商技术管理者必备的5项特质


【特殊的一篇】

这一次,除了骂阿里云,还能做些什么?

画外音:这篇帮转,差一点10W+了,谢谢。


640?wx_fmt=jpeg

架构师之路-分享可落地的技术文章


打赏,再好看,再收藏,再转发

听说的人多了,就能创造10W+。

  • 6
    点赞
  • 61
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
高科技 AIoT 互联网进入了以产业互联网为代表的互联网下半场,各大公司将关注点转移到公 司利润获取以及行业融合。2019年5G进入商用化的阶段,5G和AIoT迎来历史性 的交汇,促进了AIoT应用落地。在“资本寒冬”和经济增速放缓的大环境下,作为 国家政策大力支持、资本市场重点投入的AIoT领域得到快速发展。AIoT自身作为 庞大的产业链,为技术本身缔造出庞大的“蓄水池”,保证技术发展下限。不同类 型的公司纷纷入局AIoT,包括小米的All in AIoT,阿里和华为在AIoT领域的日趋 完善,而在垂直细分领域也产生了如涂鸦智能、特斯联等新兴热门公司。可以预 见AIoT将成为未来几年内持续热点,预估将拥有万亿规模的市场体量。 AIoT拥有广阔的市场,且在不同赛道形成垂直分布的态势。在智能安防、智能家 居、智慧社区、智能驾驶等领域形成了千亿级细分市场。从人才需求看,技术领 域的人才最为旺盛,其中包括了AI、数据、云计算平台以及芯片等核心技术方 向。无论AI+的技术找场景还是+AI的场景找技术,已经是在AI的基础算法、算力 突破同等重要使命,而AI+产业+场景+数据,是未来AI作为效率工具与各行各业 深度结合的方式。 岗位上,以平台架构为主的人才以及拥有AI落地能力的人才将会呈现巨大的需求 空间,芯片类的人才也广受各大公司青睐。AIoT拥有广阔的空间,暂时不存在职 位饱和情况。但是由于AIoT具备较强的新一代技术以及底层技术与实体经济深度 融合的特性,偏向于理论研究以及纯算法相关的职位需求较少。 行业的公司分布不同于早期互联网等热门行业,没有呈现北京、上海、深圳等一 线城市高度集中的态势,而是在国家政策以及地方政府拉动经济的政策影响下, 在全国范围内分布均匀,在长三角、珠三角以及内陆城市均有分布。 人才缺口: AIoT架构、边缘计算专家、异构计算 人才来源:AIoT所需要的人工智能、云计算、数据、物联网等人才多分布于一线 城市,人才异地获取较为普遍 数字化转型 目前,整体经济增长增速在放缓,市场的竞争愈加激烈,用户的需求更加走向个 性化,向用户提供个性化的产品和服务的需求越来越迫切。来自第三方的数据显 示,到2020年,全球数字化转型相关的行业增加值将达到18万亿美元,在全球有 46%的企业将促进数字业务发展作为未来一年内的首要业务优先级,而在中国, 这个比例数值是69%。无论从全球范围还是从国内市场来看,数字化转型已经势 不可挡。 数字化人才主要分布在互联网、信息通信等ICT基础产业,传统行业包括医疗、 制造、金融、消费品等也具备良好的人才基础。从人才分布来看,计算机科学、 软件工程、电气和电子工程等技术类学科,工商管理专业也逐渐成为数字人才的 一大来源。北京、上海、深圳、广州和杭州是推动中国经济数字化转型的“引领 型”城市,在数字人才方面具有很大优势,其中北京和杭州在大数据分析领域人才 优势显著,上海和广州在先进制造和数字化运营领域更具优势,深圳人才结构比 较均衡、各职能领域齐头并进。 人才缺口:运营管理、信息技术、数据科学、云计算 人才来源:一二线互联网公司、乙方数据公司 云计算 在国家政策引导和数字化转型浪潮的助推下,各行各业均开启“上云”之。随着 企业上云比例和应用深度的显著提升,BAT、华为、浪潮等企业纷纷加码To B业 务,布局云计算市场。据赛迪顾问预计,未来云计算市场规模仍将保持20%以上 的增长速度,尤其是广大的中小企业,利用云计算服务,借助云技术快速实现业 务和管理信息化,提升商业竞争力,且随着企业上云部署力度加大,云预算也会 随之增长。可见,云计算未来市场空间巨大。 随着云计算的发展,云计算的范畴也越来越广,人工智能开始成为重要组成部 分。随着公有云企业提供机器学习和人工智能服务成为“趋势”,人工智能的优质 基础设施同样会大量普及,促进人工智能产业的发展。 从竞争格局来看,大型巨头互联网公司,主要针对政府大客户,采取总包的形式 来承包项目,再把项目分包给其他垂直领域小厂;垂直领域(大数据或存储等) 小厂则会发展为他们生态中的一员。各巨头正纷纷打造以“我”为主的云生态,强 化对云计算行业的掌控力。在云计算白热化的竞争态势下,中小厂商需要瞄准用 户精细化需求,提供行业云等差异化云服务,以获得竞争优势。 云计算行业热点需求更多的是在技术底层如云存储、自动化运维、安全等领域。 To B政府、大央企、金融等大B客户的企业服务重点领域是如智慧城市,SaaS服 务业务等。在A-E轮融资的云公司,更多是阶段型爆发式的销售需求。公有云市 场的产品多样化,使得销售的覆盖区域、职责等都有各自公司的差异化。整个行 业趋势呈现云+行业垂直化,当前活跃的几个行业有智慧零售、大政务(智慧城 市)、金融和医疗领域。 需求旺盛的岗位方向则包括如云运维(devOps)、云平台、云产品、云销售、云 售前、云市场。目前云技术还在不停的迭代和变化中,没有出现特别饱和的现象。 随着云计算市场的持续扩张,尤其是各巨头云计算业务高速增长,云计算提供商 需要建设更多数据中心以满足业务需求;容器技术应用的进一步普及;企业级 SaaS服务走向个性化定制化,带来相应的人才需求。随着信息技术的发展,企 业管理软件正朝着智能化方向发展,而企业的软件和网络高级设计人才尚未跟上 云计算技术的发展速度。云计算让互联网应用和企业应用的界限变得越来越模 糊。对于IT企业而言,未来懂得最新云计算技术的运营人才需求激增。在云管理 方面,未来企业的管理理念、方法、工具都要适应云计算时代的特征,因此导致 企业对既了解云计算技术,又懂云计算管理的复合型人才需求加大。当企业广泛 应用网络和管理软件成为其最基本的管理要求的时候,无论是IT企业还是传统企 业,对于能够应用云计算技术的人才都会产生爆发式增长的需求。 17 | 高科技 人才缺口:数据中心、容器技术应用、企业级SaaS服务、网络设计、云运营、复 合型管理人才 人才来源:云计算厂商:如AWS、微软、阿里云、腾讯、华为云、金山云、 ucloud、七牛云等;To B领域传统厂商:如政务领域神州数码、太极计算机等公 司;工业领域:GE、西门子等公司;大中型互联网公司通用技术高端人选 芯片 在国家政策支持、技术和需求驱动的助推下,半导体行业迎来了发展和革新。随 着AI、IoT、5G、云计算技术的成熟,高精深技术作为基础技术元素体现出了新 时代特有的形态,即作为“硬”科技组团共同形成了新型基础设施。随着市场场景 的日渐丰富,芯片行业作为提升算力的核心元素,同各行各业形成了前所未有的 大融合。各类芯片公司如雨后春笋般呈现向上发展蓬勃的态势,以康佳、格力、 美的、格兰仕等为代表的传统家电行业纷纷投入巨资打造独立的芯片研发团队, 传统家电厂商以物联网以及智能家居为核心赛道,寻求技术突破来赋能产品。顶 级互联网巨头纷纷涉入芯片行业,打造其以云计算和AI双向融合下的生态环境。 工业行业积极进行工业互联网布局和数字化转型,如富士康工业互联网、东土科 技等公司也在积极布局芯片行业。地产厂商在寻求向城市运营商转型的过程中, 以划地为主、产业为辅积极布局产业园区,和高校进行密切配合,同时一些寻求 科技化住宅产品升级、产能提升、生态搭建的头部地产公司如金茂、碧桂园、恒 大以不同方式布局芯片领域。芯片行业同市场需求的粘合程度明显高于之前。在 AI、物联网、5G技术的催生下,人工智能芯片、CPU设计尤其是开源框架CPU core自主化研发、第三代半导体芯片产业链作为目前热点快速兴起。 半导体行业从候选人、公司、投资人都会跳出固定的半导体圈层在整个生态体系 下关注机会,技术落地、行业应用以及软硬一体化、定制化业务将被广泛关注,半 导体行业公司以及跨界进入半导体行业的公司都需要对赛道慎重考量。结合大趋 势,和智能家居、工业互联网、智慧城市/智慧社区关联的公司会获得更多青睐。 从人才需求来看,芯片设计、计算架构、第三代半导体材料人才需求旺盛。IC Design和verification人才作为芯片领域核心技术人才,在不同类型企业的芯片领 域都有较大的需求,主要的人才缺口在5-7年的核心技术骨干。由于该阶段人才产 生了明显的断层,该部分人才有较大的议价空间。在计算架构领域,拥有AI或者 CPU/GPU/DSP背景的人才在市场上需求旺盛。以SoC为例,同时拥有SoC和 CPU/GPU/DSP相关经验的候选人的薪酬明显高于SoC背景人选,薪酬多分布在 行业七分位以上。FPGA曾经是传统硬件技能,但是拥有AI相关经验的人选薪酬 远高于传统FPGA从业人员。AI芯片公司,互联网科技公司跨界招聘、ADAS、 IoT、AI加速器等热门行业需求也不断在催生此类人才热度。不同于芯片设计门 类,此类职位需求方主要为顶级国内高科技公司、互联网巨头和新兴创业公司, 职位以领军人物以及高端管理为主。第三代半导体公司主要以CaN以及碳基类型 半导体材料公司为主,主要应用于5G功率芯片、汽车电子电力芯片、国防科技领 域,此领域未来将诞生更多优秀的公司,人才需求方向主要为前端工艺以及材料 器件领域人才。 高科技 | 18 具体岗位方向上,对于IC设计和验证核心技术骨干人才的需求将异常旺盛且持 续,FPGA、GPU、CPU架构以及软硬件一体化算法以及架构人才会成为各大公 司重点吸引的高精尖核心人才,人才较为稀缺呈现供不应求的状态。第三代半导 体人才将成为后起之秀获得更多青睐。传统的封装测试、工业研发或将逐步呈现 饱和现象。 人才缺口:5-7年的IC设计和验证人才,以及拥有计算、AI等技能的IC复合型人才 人才来源:顶级外企芯片公司以及国内具有核心技术研发的高校和研究机构;同 时为了培养集成电人才,国家已经将集成电设置成为一级学科,各大公司以 及孵化器园区和高校正联合培养人才 大数据 随着云计算、移动互联网等新一代信息技术的应用普及,我们已飞速进入大数据 时代。不仅是互联网行业,大数据与实体经济的渗透融合也正全面展开。随着大 数据的价值凸显、应用领域日益广泛,在今年,数据中台的概念十分火热,中台 是最早由阿里在2015年提出的“大中台,小前台”战略中延伸出来的概念,它是将 数据加工以后封装成一个公共的数据产品或服务,去服务业务。在市场大环境受 影响的情况下,企业都开始修炼内功,提升内部效率,避免内部平台的重复建 设,能快速去响应业务变化。对于大公司来说,企业数据基础建设很强,公司内 部数据量大且足够复杂,他们研发的数据平台、产品及工具等在解决了公司内部 的事情后,开始寻求对外输出,打造一些通用的数据产品服务中小企业,去做商 业变现。从人才需求来看,近年来,国内对于数据科学家的需求在逐渐上升。在 传统行业,企业需要利用数字化去做创新,用人工智能和大数据开拓新业务,提 升效率,更好地与业务结合,因此CDO或者数字化转型负责人的角色比较紧缺。 从岗位角度来看,行业内数据科学、数据工程职位需求旺盛,而传统的BI和数据 分析开始出现饱和。 人才缺口:数据中台的火热,导致数据平台研发、数据应用开发和数据产品经理 的职位紧缺 人才来源:互联网一二线大公司和一些专门做数据的公司 19 | 高科技 高科技 | 20 AIoT架构 边缘计算专家 数据架构 30-40% 60-500万 80-300万 30-40% 100-200万 20-30% 5G专家 异构计算专家 AIoT智能硬件专家 20-30% 50-300万 100-450万 30-40% 60-200万 20-30% 智慧交通科学家 20-30% 100-200万 智能运维专家 20-30% 60-200万 AIoT 云计算 政务解决方案架构 AI研发工程 20-30% 30-120万 40-150万 25-40% 智慧零售研发工程 15-25% 40-150万 首席运营官(数字化转型) 首席技术官 30%+ 300-600万 200-360万 30%+ 数字化战略负责人 200-400万 30%+ 数字化转型 热门职位薪酬
王通2010年最新SEO教程完整版.pdf 6种减少网站重复内容的方法...................................................................................- 4 - 10大WordPress SEO插件...........................................................................................- 4 - 18条SEO的铁规.........................................................................................................- 5 - 20个博客SEO优化技巧.............................................................................................- 7 - 20个获取英文高质量反向链接的网站.....................................................................- 7 - 28个让关键词排名明显改观的SEO技巧.................................................................- 9 - 48个seo技巧.............................................................................................................- 10 - 68款SEO工具...........................................................................................................- 12 - Feedfetcher是什么?.................................................................................................- 15 - google是怎样计算PR值的........................................................................................- 15 - link和domain的区别.................................................................................................- 17 - pr0的新站"快速"、"大量"、"高质量"友情链接的获取方法................................- 18 - SEO宝典之增加外链全攻略....................................................................................- 19 - SEO策略的核心领域................................................................................................- 21 - SEO常用的两类在线工具........................................................................................- 23 - SEO的外链建设相关性详细分析............................................................................- 24 - seo工具:网站优化工具大全..................................................................................- 27 - SEO相关专业术语....................................................................................................- 31 - SEO优化之关键词的布局技巧...............................
SQL Server 2008商业智能完美解决方案 3/3 SQL Server 2008 2010 商业智能完美解决方案 作者:兰吉特(Lynn Langit) 出版社:人民邮电出版社; 第1版 (2010年8月1日) ISBN:7115231117, 9787115231116 页码:545 -------------------------------------------------------------------------------- 《SQL Server 2008商业智能完美解决方案》: 利用Microsoft SQL Server 2008实现灵活的商业智能解决方案使用Microsoft 完善的BI工具构建B0解决方案的必备指南,使用SQLServer 2008设计、开发和部署更有效的数据集成、报表、分析解决方案所需的权威操作指南。不论是商业智能(B0)编程的新手还是老手,都会从中受益。通过专家团队的真实示例和高明见解,读者能够掌握构建商业智能解决方案的概念、工具和技术,从而真正提供客户所需的智能性商业价值。 《SQL Server 2008商业智能完美解决方案》研究如下内容: 管理开发生命周期,打造BI团队; 深入研究SQL Servet Analysis Services、Integration Services和 Reporting Services; 使用Business Intelligence Development Studio(BIDS); 编写对销售数据进行分级、排序和深化的查询; 开发提取、转换、加载(ETL)解决方案; 添加源代码控制系统; 通过加密和凭据保护部署的包; 用MDX和DMX查询设计器构建基于OLAP多维数据集和数据挖掘模 型的报表; 用NET代码建立并实现自定义对象; 在Microsoft Office Excel和Office SharePoint Server中查看报表。 微软公司US-SQL Analysis Services 首席开发经理Donaod Farmer倾力作序 内容提要 -------------------------------------------------------------------------------- 《SQL Server 2008商业智能完美解决方案》介绍如何使用Microsoft SQL Server 2008开发商业智能(BI)解决方案。《SQL Server 2008商业智能完美解决方案》共分为4部分。第一部分阐述了商业智能基础、可视化商业智能结果、构建有效的商业智能流程、商业智能解决方案的物理架构、面向架构的OLAP逻辑设计概念;第二部分面向Analysis Services开发人员,详细介绍了如何使用BIDS以及BIDS的所有功能,提供了使用SSAS构建OLAP多维数据集和数据挖掘模型的指南;第三部分面向Integration Services开发人员,详细介绍如何使用SSIS开发ETL软件包,利用ETL包加载OLAP多维数据集和数据挖掘结构;第四部分详细介绍了SSRS的架构,以及Excel、Visio或Office SharePoint Server 2007作为BI客户端的实现。 《SQL Server 2008商业智能完美解决方案》结合专家团队提供的实际示例和丰富经验进行介绍,让读者能够直观轻松地掌握构建商业智能(BI)解决方案的概念、工具和技术,是一本不可多得的商业智能开发参考指南。无论是商业智能(BI)编程新手还是经验丰富的老手,都可从《SQL Server 2008商业智能完美解决方案》中获益。 目录 -------------------------------------------------------------------------------- 第一部分 面向商业决策者和架构的商业智能 第1章 商业智能基础 3 1.1 商业智能和数据建模 3 1.2 OLTP和OLAP 4 1.2.1 联机事务处理 4 1.2.2 联机分析处理 6 1.3 常用BI术语 9 1.3.1 数据仓库 9 1.3.2 数据市场 10 1.3.3 多维数据集 11 1.3.4 决策支持系统 11 1.3.5 数据挖掘系统 11 1.3.6 提取、转换和加载系统 12 1.3.7 报表处理系统 12 1.3.8 关键绩效指标 12 1.4 Microsoft BI解决方案的核心组件 12 1.4.1 SQL Server 2008 Analysis Services 13 1.4.2 SQL Server 2008 Reporting Services 15 1.4.3 SQL Server 2008 15 1.4.4 SQL Server 2008 Integration Services 15 1.5 Microsoft BI解决方案的可选组件 17 1.6 BI解决方案中使用的查询语言 18 1.6.1 MDX 18 1.6.2 DMX 19 1.6.3 XMLA 19 1.6.4 RDL 19 1.7 小结 19 第2章 商业智能结果可视化 21 2.1 将业务案例与BI解决方案对应起来 21 2.1.1 BI范围十大问题 22 2.1.2 BI解决方案的组成部分 23 2.2 从用户的角度理解商业智能 26 2.2.1 用Excel 2007演示BI的功能 28 2.2.2 通过Excel外接程序了解数据挖掘 35 2.2.3 使用Excel 2007查看数据挖掘结构 36 2.3 完整BI解决方案的元素 39 2.3.1 报表——确定谁将使用解决方案 39 2.3.2 ETL——实现解决方案的基础 40 2.3.3 数据挖掘——不可或缺 40 2.4 常见的业务挑战和BI解决方案 42 2.5 衡量BI解决方案的ROI 43 2.6 小结 45 第3章 构建有效的商业智能流程 46 3.1 BI项目的软件开发生命周期 46 3.1.1 Microsoft Solution Framework 47 3.1.2 Microsoft Solution Framework for Agile Software Development 48 3.1.3 将MSF用于BI项目 49 3.1.4 Microsoft Solution Framework的阶段和可交付成果 49 3.2 BI项目需要的技能 53 3.2.1 必备技能 54 3.2.2 可选技能 55 3.3 建立团队 57 3.4 小结 62 第4章 商业智能解决方案的物理架构 63 4.1 物理基础结构更改的规划 63 4.1.1 创建准确的基线调查 63 4.1.2 评估当前的服务级别协议 64 4.2 确定服务器的最优数量和最佳位置 65 4.2.1 物理服务器的考虑 67 4.2.2 逻辑服务器和服务的考虑 68 4.3 理解安全需求 70 4.4 备份和还原 78 4.4.1 备份SSAS 78 4.4.2 备份SSIS 79 4.4.3 备份SSRS 79 4.5 审核与合规 79 4.6 源代码控制 82 4.7 小结 83 第5章 面向架构的OLAP逻辑设计概念 84 5.1 设计基本的OLAP多维数据集 84 5.1.1 星形架构 85 5.1.2 反规范化 91 5.1.3 回到星形 91 5.1.4 其他设计技巧 96 5.1.5 雪花维度建模 97 5.1.6 维度建模补充 100 5.1.7 理解事实(度量)建模 105 5.1.8 BI建模的其他考虑 107 5.2 小结 108 第二部分 Microsoft SQL Server 2008 Analysis Services开发人员指南 第6章 理解SSMS和SQL Server Profiler中的SSAS 111 6.1 SQL Server Analysis Services的核心工具 111 6.1.1 基线服务配置 114 6.1.2 SSMS中的SSAS 115 6.1.3 如何查询SSAS对象 124 6.1.4 使用MDX模板 127 6.1.5 使用DMX模板 130 6.1.6 使用XMLA模板 131 6.1.7 SSMS小结 132 6.2 小结 132 第7章 用BIDS设计OLAP多维数据集 133 7.1 使用BIDS 133 7.2 在“解决方案资源管理器”中工作 135 7.2.1 Analysis Services中的数据源 137 7.2.2 数据源视图 139 7.2.3 Analysis Services中的角色 142 7.2.4 在Analysis Services对象上使用编译后的程序集 143 7.3 用BIDS构建OLAP多维数据集 144 7.4 理解维度 149 7.4.1 属性层次结构 150 7.4.2 属性关系 151 7.4.3 翻译 153 7.5 使用维度 154 7.5.1 度量值组 154 7.5.2 超越星形维度 157 7.6 构建第一个OLAP多维数据集 160 7.6.1 选择度量值组 160 7.6.2 增加维度 160 7.7 小结 164 第8章 优化多维数据集和维度 165 8.1 优化第一个OLAP多维数据集 165 8.1.1 翻译和透视 165 8.1.2 关键绩效指标 167 8.1.3 操作 171 8.1.4 计算(MDX脚本或计算成员) 176 8.2 使用多维数据集和维度属性 179 8.2.1 时间智能 181 8.2.2 SCOPE关键字 181 8.2.3 账户智能和一元运算符定义 182 8.2.4 其他向导选项 185 8.2.5 货币换算 185 8.3 高级多维数据集和维度属性 188 8.4 小结 189 第9章 处理多维数据集和维度 190 9.1 构建、处理和部署OLAP多维数据集 190 9.1.1 区分数据和元数据 191 9.1.2 在断开环境下工作 191 9.1.3 在联机环境下工作 193 9.1.4 理解聚合 193 9.2 分区 194 9.2.1 选择存储模式:MOLAP、HOLAP和ROLAP 196 9.2.2 OLTP表的分区 198 9.2.3 其他OLAP分区配置 199 9.3 实现聚合 199 9.3.1 聚合设计向导 200 9.3.2 基于使用情况的优化向导 202 9.3.3 SQL Server Profiler 203 9.3.4 聚合设计器:高级视图 204 9.4 用MOLAP、HOLAP或ROLAP实现高级存储 205 9.5 主动缓存 206 9.5.1 主动缓存的通知设置 208 9.5.2 主动缓存调优 208 9.5.3 ROLAP维度 209 9.5.4 链接 210 9.5.5 写回 210 9.6 多维数据集和维度处理选项 212 9.7 小结 215 第10章 MDX简介 216 10.1 MDX的重要性 216 10.2 编写第一个MDX查询 217 10.2.1 MDX对象名称 218 10.2.2 MDX语法的其他元素 218 10.3 MDX核心函数 220 10.4 筛选MDX结果集 226 10.5 计算成员和命名集合 228 10.6 TopCount函数 230 10.7 Rank函数和组合 232 10.8 Head和Tail函数 235 10.9 MDX的层次结构函数 236 10.10 日期函数 239 10.10.1 结合使用聚合和日期函数 242 10.10.2 关于查询优化 243 10.11 小结 244 第11章 高级MDX 245 11.1 查询维度属性 245 11.2 从季节角度查看日期维度和MDX 248 11.3 创建持久计算成员 249 11.3.1 在BIDS中创建持久计算成员 249 11.3.2 用MDX脚本创建计算成员 250 11.4 使用IIf 251 11.5 关于命名集 252 11.6 关于脚本 255 11.7 理解SOLVE_ORDER 257 11.8 创建关键绩效指标 258 11.8.1 编程创建KPI 261 11.8.2 KPI的其他提示 262 11.9 在SSRS和PerformancePoint Server上使用MDX 262 11.9.1 在SSRS 2008中使用MDX 262 11.9.2 在PerformancePoint Server 2007上使用MDX 264 11.10 小结 267 第12章 理解数据挖掘结构 268 12.1 审核业务场景 268 12.2 使用BIDS数据挖掘界面 271 12.2.1 理解数据类型和内容类型 272 12.2.2 设置高级数据属性 274 12.2.3 选择数据挖掘模型 275 12.2.4 选择最合适的挖掘模型查看器 278 12.2.5 挖掘准确性图表和预测 281 12.3 数据挖掘算法 284 12.3.1 Microsoft朴素贝叶斯 284 12.3.2 Microsoft决策树算法 288 12.3.3 Microsoft线性回归算法 290 12.3.4 Microsoft时间序列算法 290 12.3.5 Microsoft聚类算法 292 12.3.6 Microsoft序列聚类 294 12.3.7 Microsoft关联算法 295 12.3.8 Microsoft神经网络算法 299 12.3.9 Microsoft逻辑回归 300 12.4 数据挖掘的艺术 301 12.5 小结 301 第13章 实现数据挖掘结构 302 13.1 实现CRISP-DM生命周期模型 302 13.2 用BIDS构建数据挖掘结构 303 13.3 用BIDS增加数据挖掘模型 305 13.4 处理挖掘模型 308 13.5 验证挖掘模型 310 13.5.1 提升图 310 13.5.2 利润图 312 13.5.3 分类矩阵 313 13.5.4 交叉验证 315 13.6 数据挖掘预测查询 316 13.6.1 DMX预测查询 318 13.6.2 DMX预测函数 320 13.7 数据挖掘和Integration Services 322 13.8 数据挖掘对象的处理 324 13.9 数据挖掘客户端 326 13.10 小结 326 第三部分 Microsoft SQL Server 2008 Integration Services开发人员指南 第14章 Microsoft SQL Server 2008 Integration Services的架构组件 329 14.1 Integration Services架构概述 329 14.2 Integration Services包 331 14.3 Integration Services对象模型和组件 334 14.3.1 控制流 335 14.3.2 数据流 335 14.3.3 变量 337 14.3.4 表达式 338 14.3.5 连接管理器 339 14.3.6 事件处理程序和错误处理 340 14.4 Integration Services运行时 341 14.5 Integration Services数据流引擎 342 14.5.1 数据流缓冲区 342 14.5.2 同步数据流输出 346 14.5.3 异步数据流输出 346 14.6 日志提供程序 346 14.7 部署Integration Services包 347 14.7.1 包配置 347 14.7.2 包部署选项 348 14.8 小结 348 第15章 用Business Intelligence Development Studio创建Microsoft SQL Server 2008 Integration Services包 349 15.1 Visual Studio 2008中的Integration Services 349 15.1.1 使用Integration Services项目模板创建新SSIS项目 350 15.1.2 在“解决方案资源管理器”中查看SSIS项目 351 15.1.3 使用SSIS包设计器 352 15.1.4 使用SSIS工具箱 353 15.1.5 SSIS菜单选项 354 15.2 连接管理器 355 15.2.1 标准数据库连接管理器 355 15.2.2 其他类型的连接管理器 356 15.3 控制流 356 15.3.1 控制流任务 358 15.3.2 控制流容器 360 15.3.3 优先约束 360 15.4 数据流 362 15.4.1 数据流源组件 363 15.4.2 目标组件 364 15.4.3 转换组件 364 15.4.4 Integration Services数据查看器 366 15.5 变量 367 15.5.1 “变量”窗口 367 15.5.2 变量属性 368 15.5.3 系统变量 369 15.6 表达式 369 15.7 小结 371 第16章 Microsoft SQL Server 2008 Integration Services的高级功能 372 16.1 Integration Services中的错误处理 372 16.2 SSIS中的事件、日志、调试和事务 373 16.3 日志记录和事件 374 16.4 调试Integration Services包 377 16.5 检查点和事务 378 16.6 设计Integration Services包的最佳实践 380 16.7 数据事件探查 381 16.8 小结 384 第17章 商业智能解决方案中的Microsoft SQL Server 2008 Integration Services包 385 17.1 商业智能的ETL 385 17.2 加载OLAP多维数据集 385 17.2.1 使用Integration Services检测数据质量 386 17.2.2 转换源数据 388 17.2.3 使用中间服务器 388 17.2.4 数据沿袭 392 17.3 转移到星形架构加载 393 17.3.1 加载维度表 393 17.3.2 加载事实数据表 394 17.4 更新 397 17.4.1 事实数据表更新 398 17.4.2 维度表更新 398 17.5 数据挖掘的ETL 399 17.5.1 初始加载 399 17.5.2 模型定型 400 17.5.3 数据挖掘查询 401 17.6 小结 402 第18章 在Microsoft SQL Server 2008 Integration Services中部署和管理解决方案 403 18.1 Integration Services中的解决方案和项目结构 403 18.2 源代码控制 403 18.3 部署问题 407 18.3.1 包配置 409 18.3.2 复制文件部署 411 18.3.3 BIDS部署 412 18.3.4 使用部署实用工具部署 414 18.4 SQL Server代理和集成服务 416 18.4.1 SSIS包安全性介绍 416 18.4.2 处理敏感数据和代理执行账户 419 18.4.3 安全性:两个规则 420 18.5 SSIS服务 420 18.6 小结 421 第19章 扩展和集成SQL Server 2008 Integration Services 422 19.1 SSIS脚本介绍 422 19.2 Visual Studio Tools for Applications 423 19.3 脚本任务 423 19.3.1 Dts对象 425 19.3.2 调试脚本任务 426 19.4 脚本组件 426 19.4.1 ComponentMetaData属性 431 19.4.2 源、转换和目标 432 19.4.3 调试脚本组件 436 19.5 自定义SSIS任务和组件开发概述 436 19.5.1 控制流任务 439 19.5.2 数据流组件 440 19.5.3 其他组件 440 19.6 自定义应用程序中的SSIS集成概述 442 19.7 小结 444 第四部分 Microsoft SQL Server Reporting Services及商业智能的其他客户端界面 第20章 用SQL Server 2008 Reporting Services创建报表 447 20.1 了解Reporting Services的架构 447 20.2 安装和配置Reporting Services 449 20.2.1 HTTP侦听器 451 20.2.2 报表管理器 451 20.2.3 报表服务器Web服务 451 20.2.4 身份验证 452 20.2.5 后台处理(作业管理器) 453 20.3 使用BIDS创建报表 453 20.3.1 其他类型的报表 460 20.3.2 报表示例 460 20.4 部署报表 461 20.5 小结 462 第21章 创建SQL Server 2008 Reporting Services报表 463 21.1 将查询设计器用于Analysis Services 463 21.1.1 MDX查询设计器 464 21.1.2 在查询中设置参数 466 21.1.3 DMX查询设计器 467 21.1.4 在BIDS中使用报表设计器 469 21.2 理解报表项 471 21.2.1 列表和矩形报表项 471 21.2.2 Tablix数据区域 472 21.3 使用报表生成器 474 21.4 小结 477 第22章 高级SQL Sever 2008 Reporting Services 478 22.1 向SSRS报表添加自定义代码 478 22.2 在Word或Excel 2007中查看报表 480 22.3 URL访问 480 22.4 嵌入自定义ReportViewer控件 481 22.5 关于报表参数 485 22.6 关于安全凭据 485 22.7 关于SOAP API 486 22.8 部署——可伸缩性和安全性 490 22.8.1 性能和可伸缩性 490 22.8.2 高级内存管理 491 22.8.3 扩展 492 22.9 管理脚本 493 22.10 小结 494 第23章 用Microsoft Excel 2007作为OLAP多维数据集客户端 495 23.1 使用数据连接向导 495 23.2 使用“导入数据”对话框 497 23.3 理解“数据透视表”界面 497 23.4 创建示例数据透视表 499 23.5 脱机OLAP 501 23.6 Excel OLAP函数 502 23.7 扩展Excel 502 23.8 小结 503 第24章 用Microsoft Office 2007作为数据挖掘客户端 504 24.1 安装数据挖掘外接程序 504 24.2 数据挖掘和Excel 2007的集成 505 24.2.1 使用表分析工具组 506 24.2.2 在Excel 2007中使用“数据挖掘”选项卡 514 24.2.3 “管理”和“模型用法” 515 24.2.4 “数据准备”组 517 24.2.5 “数据建模”组 519 24.2.6 “准确性和验证”组 522 24.3 Visio 2007中的数据挖掘集成 523 24.4 客户端可视化 527 24.5 云形图中的数据挖掘 528 24.6 小结 528 第25章 SQL Server商业智能和Microsoft Office SharePoint Server 2007 529 25.1 Excel Services 529 25.1.1 Excel Services的基本架构 530 25.1.2 Excel工作表的永久性 531 25.1.3 Excel Services工作表的介绍性示例 531 25.1.4 发布参数化Excel工作表 533 25.1.5 Excel Services:Web Services API 535 25.1.6 实际的Excel Services示例 536 25.2 SQL Server Reporting Services与Office SharePoint Server 2007 538 25.2.1 使用Office SharePoint Server 2007配置SQL Server Reporting Services 539 25.2.2 创建并部署一个报表 539 25.2.3 在Office SharePoint Server 2007中使用报表:本机模式 541 25.2.4 在Office SharePoint Server 2007中使用报表:SharePoint集成模式 542 25.2.5 使用报告中心模板 544 25.3 PerformancePoint Server 545 25.4 小结 545 作者介绍 -------------------------------------------------------------------------------- 作者:(美国)兰吉特(Lynn Langit) (美国)Kevin S.Goff (美国)Davide Mauri 等 译者:张猛 杨越 朗亚妹 等 Lynn Langit,MicrosoftMSDN团队的一位开发人员讲。在加入微软公司之前,Lynn创办了一家提供B0解决方案的开发公司,并担任首席架构。她拥有很多Microsoft认证,包括MCITP、MCSD、MCDBA和MCT。 Kevin S,Goff,Microsoft MVP和培训,还是Microsoft金牌认证合作伙伴项目的BI实践负责人。拥有MCP、MCAD、MCDBA和MCT认证。 Davide Mauri,Microsoft MVP,他从65版起就一直使用SQL Server。Sahil Malik咨询和培训,多年的Microsoft MVP和INETA发言人。 John Welch ,crosoft MVP,一家专攻BI解决方案的咨询公司的首席架构。 -------------------------------------------------------------------------------- 9.5.4 链接 在准备处理多维数据集的时候,还有另外两个配置选项和功能需要考虑,即链接对象和写回.我们还要研究有关错误处理的设置(在“多维数据集和维度处理选项”一节),因为根据业务需求不同,这些配置也很重要,而且它们的配置值会影响多维数据集的处理时间。我们先从链接对象开始。 链接对象是需要与当前操作的SSAS数据库相关联的、来自其他SSAS数据库(Analysis Services 2008或Analysis Services 2005)的SSAS对象,如度量值组或维度。链接对象也可以包含KPI、操作和计算。链接对象选项可以用来克服SSAS 2008一个多维数据集只能基于一个数据源视图的局限性。它还可以实现某种伸缩性,因为可以使用多个服务器提供数据查询。 SSAS中使用链接对象的功能默认是禁用的。如果想使用这个选项,需要在SSMS中启用它,需将SSMS连接到SSAS,在SSAS服务器实例上单击右键,选择“属性”选项,然后启用链接。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值