搭建TensorFlowOnSpark，并使用分布式系统来进行TF预测（编辑中）

“这台机器被安排由你照管。
与其一同战斗，并使其不蒙受失败的耻辱。
为这台机器服务，它就会为你战斗。”

“（回答）-我会的。”
——机械委任仪式上的誓言

 

筛选计算遭遇硬件限制，现在电脑配置（i5，8G内存）仅能进行大约3000条数据的决策树特征处理。故优先考虑使用spark分布式系统来计算

 

1. 用ssh连接远程服务器节点

 

2.确认装载了Py2.7+或者Py3.5+，确认装载了TensorFlow,  TensorFlowOnSpark，zip

(没有的话用pip装载)

yum install zip

 

3. 移动到TensorFlowOnSpark目录，指定宏 export TFoS_HOME=$(pwd)

打包TFoS文件 zip -r tfspark.zip tensorflowonspark/*

 

4.上传TF代码