Thrift框架-Windows-C++ x64编译

4 篇文章 1 订阅

Thrift简介    

    Thrift是Facebook提供的一个跨语言的服务部署框架,可以实现客户端和服务器远程过程调用。相较于Google的grpc框架,Thrift对三方库依赖更少,编译更简单,并且运行效率也更高。Thrift只依赖boost、openssl和libevent三个库,测试demo只依赖openssl静态库,因此可以暂不编译boost和libevent,只需要在编译thrift的时候,引入boost源文件和libevent头文件即可。下面详细介绍thrift 0.13.0的编译过程。


一、编译boost

1、下载并解压boost源码

下载boost源码,下载地址:Boost C++ Libraries,下载后对比MD5,如果没问题,直接解压即可:

2、生成boost编译工具b2.exe

打开VS工具命令提示(例如VS2019为:x64 Native Tools Command Prompt for VS 2019), 定位到boost目录,执行下面的命令:

>.\bootstrap.bat

执行成功后,会在boost目录下生成b2.exe。

3、编译boost

执行下面的命令编译boost:

>b2.exe stage --toolset=msvc-14.2 address-model=64 --stagedir="E:\code\boost_1_74_0\CompileResult" threading=multi --build-type=complete --without -python link=static release

 --toolset参数:需要和VS的平台工具集版本一致,否则编译thrift链接boost时,会出现版本不一致导致找不到对应的boost静态链接库的问题。

查看VS的平台工具集方法:打开任意VS项目,查看项目属性--配置属性--常规--平台工具集:

address-model参数:指定静态库是32位还是64位;

stagedir参数:编译结果目录

4、编译结果

编译成功后,会在<stagedir>目录下生成对应的boost静态链接库:

5、验证boost

新建VS工程,导入boost头文件和静态库,执行下面的代码验证boost是否编译成功:

#include <iostream>
#include <string>
#include <boost/regex.hpp>
int main()
{
	boost::regex pattern("\\w+@\\w+(\\.\\w+)*");
	std::string mail("xxx@gmail.com");

	if (boost::regex_match(mail, pattern)) {
		std::cout << mail << " is a valid mail address!" << std::endl;
	}
	else {
		std::cout << mail << " is not a valid mail address!" << std::endl;
	}
}


二、编译openssl

1、下载并解压openssl源码

下载openssl源码,下载地址:/source/index.html

2、安装编译工具ActivePerl和NASM

2.1 安装ActivePerl

安装成功会有如下提示:

2.2 安装NASM汇编器

下载并安装 NASM 汇编器,并将 NASM 安装路径添加到系统环境变量 Path 中。
下载地址:https://www.nasm.us/https://www.nasm.us/
例如:nasm-2.13.01-installer-x64.exe

安装成功会有如下提示:

2.3 安装dmake.exe

>ppm install dmake

dmake安装成功,会有如下提示:

3、配置openssl编译环境

依次打开:开始菜单 -- 所有程序 -- Visual Studio 2019 -- Visual Studio Tools -- VC -- x64 Native Tools Command Prompt for VS 2019

注意这里一定不要选错了,编译64位就选择 x64 Native Tools Command Prompt for VS 2019,如果选错了则需要重新解压openssl到一个空目录重新编译,亲测在原目录使用nmake clean && nmake无效。

打开 x64 Native Tools Command Prompt for VS 2019,定位到openssl目录,执行命令配置openssl编译环境:

perl Configure VC-WIN64A no-asm no-shared --prefix=E:\code\oci-lib\openssl

VC-WIN64A:表示编译64位动态库,如果编译debug版本,则改成debug-VC-WIN64A,如果编译32位版本,则改成VC-WIN32;

no-asm:表示不使用汇编;

no-shared:表示静态链接;

prefix:编译目标路径;

4、编译openssl

执行命令:

nmake

编译成功后提示如下:

5、编译结果

编译成功后,在openssl目录下可见相关静态库:


三、编译libevent

1、下载并解压libevent源码

下载libevent源码,下载地址为:libevent

2、修改libevent配置文件

修改Makefile.nmake文件中的LIBFLAGS变量,增加/MACHINE:X64选项以生成64为静态库:

LIBFLAGS=/nologo /MACHINE:X64

3、编译libevent

然后打开x64 Native Tools Command Prompt for VS 2019,定位到libevent目录,执行编译命令

>nmake -f Makefile.nmake

4、编译结果

编译成功生成libevent.lib、libevent_core.lib、libevent_extras.lib三个静态库:

5、libevent验证

新建VS工程,导入libevent头文件和静态库,执行下面的代码验证libevent是否编译成功:

#include <event.h>
#include <stdio.h>

int main()
{
    const char *version = event_get_version();
    printf("%s\n",version);
    return 0;
}


四、编译thrift

1、下载并解压thrift源码

下载thrift源码,下载地址为:Apache Thrift - Download

或者:Index of /thrift

2、拷贝thrift依赖的头文件

将对应的boost、openssl、libevent的头文件拷贝到thrift项目对应的路径下,并修改项目的头文件引用目录:

3、修改代码

(1)修改thrift_export.h,添加#define thrift_EXPORTS

打开<thrift目录>\lib\cpp\src\thrift\thrift_export.h,在文件中添加#define thrift_EXPORTS

由于我们需要编译thrift生成静态链接库,因此需要添加定义:#define thrift_EXPORTS,将THRIFT_EXPORT设置为__declspec(dllexport)。

(2)如果出现下面的错误,则将报错的地方的

#include <thrift/config.h>

修改为

#include <config.h>

直接引用根目录下的config.h头文件

error msg:无法打开包括文件: “thrift/config.h”: No such file or directory

(3)修改thrift根目录下的config.h,注释掉部分宏定义,以屏蔽引用某些linux下的头文件:

error msg:无法打开包括文件: “netinet/in.h”: No such file or directory

(4)concurrency筛选器下面的部分源文件名称与源码目录下的文件名称不一致,需要移除后重新添加:

4、编译thrift

打开\thrift-0.13.0\lib\cpp下的VS工程文件,直接编译libthrift项目即可,注意在项目工程上右键:》属性-》c/c++-》代码生成-》运行库,选择对应的运行库加载模式,这里必须和调用 libthrift 的上层项目工程的配置一致。

多线程(/MT)与多线程(/MD)的区别:VS中的多线程(/MT)、多线程调试(/MTd)、多线程DLL(/MD)、多线程调试DLL(/MDd)的区别_深山里的小白羊的博客-CSDN博客_多线程调试 多线程调试dll

5、编译结果

编译成功后,会在<thrift目录>\lib\cpp\x64\Release目录下生成libthrift.lib

  • 6
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Spark-Thrift和Spark-SQL是Spark框架中的两个组件,它们有以下区别: 1. Spark-SQL是Spark的一个模块,用于处理结构化数据,支持SQL查询和DataFrame API。它提供了一种高效且易于使用的方法来处理和分析结构化数据。用户可以使用SQL语句或DataFrame API来查询和操作数据。Spark-SQL允许用户直接在Spark应用程序中使用SQL查询,而无需编写复杂的MapReduce代码。 2. Spark-Thrift是Spark的一个独立服务,它提供了一个标准的Thrift接口,用于执行SQL查询。它可以作为一个独立的进程运行,并通过网络接收来自客户端的SQL查询请求,并将查询转发到Spark集群中的Spark-SQL模块进行处理。Spark-Thrift使得可以使用不同的编程语言,如Java、Python、R等,通过Thrift接口与Spark集群交互。 因此,Spark-SQL是Spark框架中用于处理结构化数据的模块,而Spark-Thrift是提供Thrift接口让用户可以使用不同编程语言与Spark-SQL模块交互的独立服务。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [CDH15.0支持spark-sql和spark-thrift-server](https://blog.csdn.net/u012458821/article/details/87635599)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [122.Thrift和spark-sql客户端部署](https://blog.csdn.net/m0_47454596/article/details/126856172)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值