最近毕业在家,暂时还没有入职也没有出去玩,就在网上跟着学MIT6.824分布式系统的课程,刚把第一个实验搞完,简单总结一下实现过程中自己踩过的坑
Go语言的封装性
具体报错:
gob: type has no exported fields
原因:
定义rpc调用所需的数据结构时,其首字母没有大写,导致外部程序无法访问
解决办法:
将RPC相关的、需要被外部访问的数据结构首字母大写,包括所有数据字段。同理所有的RPC函数名也需要首字母大写
中间文件命名
具体报错:
使用test-mr.sh时不通过
原因:
由于自己单独测没有问题,于是翻看了一下test-mr.sh具体内容,发现其会对所有mr-out*排序,既存在一行语句:
$ sort mr-out* | grep . > mr-wc-all
而我在实现worker时,将中间文件输出为"mr-outjson-xxx",因此sort函数会将这部分文件一起纳入,导致结果出错
解决办法:
中间文件名不使用前缀"mr-out"
其他
rpc.Register: