golang 简易分布式集群

能够发送/接收请求和响应


能够连接到集群


如果无法连接到群集(如果它是第一个节点),则可以作为主节点启动节点


每个节点有唯一的标识


能够在节点之间交换json数据包


接受命令行参数中的所有信息(将来在我们系统升级时将会很有用)




package main


import (

        "fmt"

        "strconv"

        "time"

        "math/rand"

        "net"

        "flag"

        "strings"

        "encoding/json"

        )


// 节点数据信息

type NodeInfo struct {

    

    // 节点ID,通过随机数生成

    NodeId int `json:"nodeId"`

    // 节点IP地址

    NodeIpAddr string `json:"nodeIpAddr"`

    // 节点端口

    Port string `json: "port"`

}


// 将节点数据信息格式化输出

//NodeInfo:{nodeId: 89423,nodeIpAddr: 127.0.0.1/8,port: 8001}

func (node *NodeInfo) String() string {

    

    return "NodeInfo:{ nodeId:" + strconv.Itoa(node.NodeId) + ",nodeIpAddr:" + node.NodeIpAddr + ",port:" + node.Port + "}"

}


/* 添加一个节点到集群的一个请求或者响应的标准格式 */

type AddToClusterMessage struct {

    // 源节点

    Source NodeInfo  `json:"source"`

    // 目的节点

    Dest NodeInfo  `json:"dest"`

    // 两个节点连接时发送的消息

    Message string  `json:"message"`

}


/* Request/Response 信息格式化输出 */

func (req AddToClusterMessage) String() string {

    return "AddToClusterMessage:{\n  source:" + req.Source.String() + ",\n  dest: " + req.Dest.String() + ",\n  message:" + req.Message + " }"

}


// cat vi go

// rm


func main()  {

    

    // 解析命令行参数

    makeMasterOnError := flag.Bool("makeMasterOnError", false, "如果IP地址没有连接到集群中,我们将其作为Master节点.")

    clusterip := flag.String("clusterip", "127.0.0.1:8001", "任何的节点连接都连接这个IP")

    myport := flag.String("myport", "8001", "ip address to run this node on. default is 8001.")

    flag.Parse() //解析

    

    fmt.Println(*makeMasterOnError)

    fmt.Println(*clusterip)

    fmt.Println(*myport)

    

    /* 为节点生成ID */

    rand.Seed(time.Now().UTC().UnixNano()) //种子

    myid := rand.Intn(99999999) // 随机

    

    //fmt.Println(myid)

    

    // 获取IP地址

    myIp,_ := net.InterfaceAddrs()

    fmt.Println(myIp[0])

    

    // 创建NodeInfo结构体对象

    me := NodeInfo{NodeId: myid, NodeIpAddr: myIp[0].String(), Port: *myport}

    // 输出结构体数据信息

    fmt.Println(me.String())

    dest := NodeInfo{ NodeId: -1, NodeIpAddr: strings.Split(*clusterip, ":")[0], Port: strings.Split(*clusterip, ":")[1]}

    

    /* 尝试连接到集群,在已连接的情况下并且向集群发送请求 */

    ableToConnect := connectToCluster(me, dest)

    

    /*

     * 监听其他节点将要加入到集群的请求

     */

    if ableToConnect || (!ableToConnect && *makeMasterOnError) {

        if *makeMasterOnError {fmt.Println("Will start this node as master.")}

        listenOnPort(me)

    } else {

        fmt.Println("Quitting system. Set makeMasterOnError flag to make the node master.", myid)

    }

    

}


/*

 * 这是发送请求时格式化json包有用的工具

 * 这是非常重要的,如果不经过数据格式化,你最终发送的将是空白消息

 */

func getAddToClusterMessage(source NodeInfo, dest NodeInfo, message string) (AddToClusterMessage){

    return AddToClusterMessage{

    Source: NodeInfo{

    NodeId: source.NodeId,

    NodeIpAddr: source.NodeIpAddr,

    Port: source.Port,

    },

    Dest: NodeInfo{

    NodeId: dest.NodeId,

    NodeIpAddr: dest.NodeIpAddr,

    Port: dest.Port,

    },

    Message: message,

    }

}


func connectToCluster(me NodeInfo, dest NodeInfo) (bool){

    /* 连接到socket的相关细节信息 */

    connOut, err := net.DialTimeout("tcp", dest.NodeIpAddr + ":" + dest.Port, time.Duration(10) * time.Second)

    if err != nil {

        if _, ok := err.(net.Error); ok {

            fmt.Println("未连接到集群.", me.NodeId)

            return false

        }

    } else {

        fmt.Println("连接到集群. 发送消息到节点.")

        text := "Hi nody.. 请添加我到集群.."

        requestMessage := getAddToClusterMessage(me, dest, text)

        json.NewEncoder(connOut).Encode(&requestMessage)

        

        decoder := json.NewDecoder(connOut)

        var responseMessage AddToClusterMessage

        decoder.Decode(&responseMessage)

        fmt.Println("得到数据响应:\n" + responseMessage.String())

        

        return true

    }

    return false

    }

    

    func listenOnPort(me NodeInfo){

        /* 监听即将到来的消息 */

        ln, _ := net.Listen("tcp", fmt.Sprint(":" + me.Port))

        /* 接受连接 */

        for {

            connIn, err := ln.Accept()

            if err != nil {

                if _, ok := err.(net.Error); ok {

                    fmt.Println("Error received while listening.", me.NodeId)

                }

            } else {

                var requestMessage AddToClusterMessage

                json.NewDecoder(connIn).Decode(&requestMessage)

                fmt.Println("Got request:\n" + requestMessage.String())

                

                text := "Sure buddy.. too easy.."

                responseMessage := getAddToClusterMessage(me, requestMessage.Source, text)

                json.NewEncoder(connIn).Encode(&responseMessage)

                connIn.Close()

            }

        }

    }



  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Golang 中使用 Redis 集群,可以使用官方提供的 Redis 客户端库 Redigo。Redigo 提供了连接池、管道、事务等功能,非常适合高并发场景下的 Redis 操作。 以下是一个使用 Redigo 连接 Redis 集群的示例: ```go package main import ( "fmt" "time" "github.com/gomodule/redigo/redis" ) func main() { cluster := &redis.Cluster{ MaxRedirects: 8, StartupNodes: []string{ "redis://node1:6379", "redis://node2:6379", "redis://node3:6379", }, DialTimeout: 10 * time.Second, ReadTimeout: 100 * time.Millisecond, WriteTimeout: 100 * time.Millisecond, } conn, err := cluster.Get() if err != nil { panic(err) } defer conn.Close() _, err = conn.Do("SET", "key", "value") if err != nil { panic(err) } value, err := redis.String(conn.Do("GET", "key")) if err != nil { panic(err) } fmt.Println(value) } ``` 在以上示例中,我们使用了 `redis.Cluster` 结构体来连接 Redis 集群,`MaxRedirects` 指定了最大重定向次数,`StartupNodes` 指定了集群中的节点地址,`DialTimeout`、`ReadTimeout`、`WriteTimeout` 分别指定了建立连接、读取数据、写入数据的超时时间。 使用 `cluster.Get()` 方法可以获取一个连接,使用完后需要调用 `conn.Close()` 方法释放连接。在获取到连接后,我们可以使用 `conn.Do()` 方法来执行 Redis 命令,也可以使用 `redis.String()`、`redis.Int()` 等方法来获取命令执行结果。 需要注意的是,在 Redis 集群中使用 `SET`、`GET` 等单个键操作命令时,Redigo 会自动进行分片操作,将请求发送到正确的节点。但是在使用一些不支持分片的命令时,需要手动指定节点。例如使用 `MGET` 命令时,需要使用 `redis.MultiConn.Do()` 方法并手动指定节点。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值