- 博客(5)
- 收藏
- 关注
RSS订阅原创 如何使用Java程序通过JDBC访问HDInsight Hive Server
很多用户在使用HDInsight的时候，需要Java客户端访问群集的HiveServer语句、或者提交作业，在Azure的门户已经提供了使用ODBC连接HiveServer的方式（海外环境配置ODBC链接，中国环境配置ODBC链接），本文主要介绍如何让Java程序通过JDBC访问HDInsightHive Server。 首先需要注意的是，从安全的角度，HDInsi
2015-06-07 19:05:06
851
原创 提交HDInsight Pig作业
Pig是Hadoop常用的一个模块，Azure提供了使用PowerShell提交Pig作业的方式，当Pig Latin的脚本较为短小时，可使用New-AzureHDInsightPigJobDefinition的-Query直接指定脚本内容，示例如下： $clusterName = "HDIDemo" $QueryString = "intxt1 = load 'wasb://hdi
2015-04-02 13:50:48
471
原创 媒体服务频道访问控制
Azure针对于视频、媒体行业发布了媒体服务，用户在配置直播流的时候，需要注意媒体服务针对直播的采集源是存在IP地址权限管理的，具体配置如下： 登陆中国Azure的门户，点击“频道”页面相应的媒体服务账号，并进入“配置”页面 在“插入URL允许的IP地址”选项卡中输入采集源的IP地址以及，如：8.8.8.8 注意：如果输入0.0.0.0，意味着
2015-02-28 21:00:54
338
原创 中国Azure媒体服务RESTAPI的Endpoint
由于海外Azure和中国Azure有不同的domain，很多用户在使用媒体服务RESTAPI时，需要指定中国Azure的Endpoint。本篇文章主要介绍，如何快速查找中国媒体服务的Endpoint： 登陆中国Azure的门户，进入媒体服务账号的页面，并点击“以编程方式上载视频” 如下代码为中国Azure媒体服务的Endpoint如下：
2015-02-26 11:49:18
831
原创 Reduce对Pig作业性能的影响
很多用户在使用HDInsight的Pig功能时，发现有时很简单一个PigLatin的relation会花费很长时间执行，当HDI使用MR框架时，由于Pig会根据具体的relation拆分成相应的Map和Reduce任务。根据Hadoop的MR框架如下特点，针对Reduce并行度的优化，会对Pig的作业有很大的性能影响。 Hadoop的MR框架中有以下特点： - Map的并行度个数是由输入文
2015-02-24 18:42:24
733
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人