Golang实现匿名管道

1.管道相关概念

  • 管道是一种半双工(或者说单向)的通信方式,只能用于父进程与子进程以及同祖先的子进程之间的通信。例如,使用shell命令的时候,常常使用到管道,例如:
[root@localhost lianxi]# ps aux | cat -n
  • shell为每个命令都创建一个进程,然后把左边命令都创建一个进程,然后把左边命令的标准输出用管道与右边命令的标准输入连接起来。管道的优点在于简单,而缺点则是只能单向通信以及对通信双方关系上的严格限制。

2.go实现管道

  • 对于管道,go是支持的。通过标准库代码包os/exec中的API,可以在执行操作系统命令并在此之上建立管道。下面创建一个exec.Cmd类型的值
cmd := exec.Command("echo","-n","my first command comes from golang")
  • 在exec.Cmd类型之上有一个名为start的方法,可以使用它启动命令
if err := cmd.Start();err != nil{
   fmt.Printf("error : the command can not be startup %s\n",err)
}
  • 为了创建一个能够获取命令的输出管道,需要在if语句之前加入如下语句:
stdout,err := cmd.StdoutPipe()
if err != nil{
   fmt.Printf("err:couldn't obtain the stdout pipe for command %s\n",err)
} 
  • 变量cmd的StdoutPipe方法会返回一个输出管道,这里把代表这个输出管道的值赋给了变量stdout。stdout的类型是io.ReadCloser,后者是一个扩展了io.Reader接口的接口类型,并定义了可关闭的数据读取行为
    • 有了stdout,启动上述命令之后,就可以通过调用它的read方法来获取命令的输出
output := make([]byte,50)
n,err := stdout.Read(output)
   if err != nil{
   fmt.Printf("err:couldn't read data from the pipe %s\n",err)
   }
fmt.Printf("%s\n",n)

3.匿名管道

  • 管道可以把一个命令的输出作为另一个命令的输入,go代码也可以做到
package main

import (
	"bytes"
	"fmt"
	"os/exec"
)

func main()  {
	cmd1 := exec.Command("ps","aux")
	cmd2 := exec.Command("grep","root")
	var outputbuf1 bytes.Buffer
	cmd1.Stdout = &outputbuf1
	if err := cmd1.Start();err!=nil{
		fmt.Printf("error:the first command can not be startup %s\n",err)
		return
	}
	if err := cmd1.Wait();err!=nil{
		fmt.Printf("error:couldn't wait for the first command %s\n",err)
		return
	}
	cmd2.Stdin = &outputbuf1
	var outputbuf2 bytes.Buffer
	cmd2.Stdout = &outputbuf2
	if err := cmd2.Start();err!=nil{
		fmt.Printf("error:the second command can not be startup %s\n",err)
		return
	}
	if err := cmd2.Wait();err!=nil{
		fmt.Printf("error:couldn't wait for the second command %s\n",err)
		return
	}
	fmt.Printf("%s\n",outputbuf2.Bytes())
}
输出:(只截取前面部分)
root               659   3.0  0.1  4513160  18240   ??  Ss   10:16AM   0:01.31 /System/Library/PrivateFrameworks/XprotectFramework.framework/Versions/A/XPCServices/XprotectService.xpc/Contents/MacOS/XprotectService
root             16596   1.9  0.0  4398004   4328   ??  Ss    8:39PM   0:00.02 /Library/Manufacturer/Endpoint Agent/SEHA.app/Contents/MacOS/SEHA
root               230   1.6  0.3  4542564  48776   ??  Ss   10:14AM   0:14.87 /usr/libexec/syspolicyd
root               145   1.6  0.1  4506104  12056   ??  Ss   10:14AM   0:28.81 /System/Library/PrivateFrameworks/TCC.framework/Resources/tccd system
  • *bytes.Buffer类型实现了io.Writer接口,所以才能将&outputbuf1赋给cmd1.stdout。这样,当cmd1启动后的所有输出内容都会被写入到outputbuf1。
  • cmd1的wait方法的调用会一直阻塞,直到cmd1完全运行结束
  • 再设置cmd2的stdin和stdout字段,启动cmd2,并等待运行完毕
  • 由于*bytes.Buffer类型也实现了io.Reader接口,才能把&outputbuf1也赋给cmd2.Stdin。正是因为与outputbuf1有关的这两次赋值,cmd2的输入才能与cmd1的输出串联在一起。这个媒介是outputbuf1,起到了管道的作用
  • 为了获取cmd2的所有输出内容,需要等到它运行结束后再去查看缓冲区outputbuf2中的内容
  • cmd1和cmd2的示例模拟出了操作系统命令 ps aux | grep root
  • 不过,cmd2的输出会与直接运行这个操作系统命令得到的输出有所不同。因为该示例程序相当于在自身运行过程中又运行了上面的这个操作系统命令
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
go实战微服务分布式系统(distributed system)是建立在网络之上的软件系统。正是因为软件的特性,所以分布式系统具有高度的内聚性和透明性。因此,网络和分布式系统之间的区别更多的在于高层软件(特别是操作系统),而不是硬件。在一个分布式系统中,一组独立的计算机展现给用户的是一个统一的整体,就好像是一个系统似的。系统拥有多种通用的物理和逻辑资源,可以动态的分配任务,分散的物理和逻辑资源通过计算机网络实现信息交换。系统中存在一个以全局的方式管理计算机资源的分布式操作系统。通常,对用户来说,分布式系统只有一个模型或范型。在操作系统之上有一层软件中间件(middleware)负责实现这个模型。一个著名的分布式系统的例子是万维网(World Wide Web),在万维网中,所有的一切看起来就好像是一个文档(Web页面)一样。 [1] 在计算机网络中,这种统一性、模型以及其中的软件都不存在。用户看到的是实际的机器,计算机网络并没有使这些机器看起来是统一的。如果这些机器有不同的硬件或者不同的操作系统,那么,这些差异对于用户来说都是完全可见的。如果一个用户希望在一台远程机器上运行一个程序,那么,他必须登陆到远程机器上,然后在那台机器上运行该程序。 [1] 分布式系统和计算机网络系统的共同点是:多数分布式系统是建立在计算机网络之上的,所以分布式系统与计算机网络在物理结构上是基本相同的。 [1] 他们的区别在于:分布式操作系统的设计思想和网络操作系统是不同的,这决定了他们在结构、工作方式和功能上也不同。网络操作系统要求网络用户在使用网络资源时首先必须了解网络资源,网络用户必须知道网络中各个计算机的功能与配置、软件资源、网络文件结构等情况,在网络中如果用户要读一个共享文件时,用户必须知道这个文件放在哪一台计算机的哪一个目录下;分布式操作系统是以全局方式管理系统资源的,它可以为用户任意调度网络资源,并且调度过程是“透明”的。当用户提交一个作业时,分布式操作系统能够根据需要在系统中选择最合适的处理器,将用户的作业提交到该处理程序,在处理器完成作业后,将结果传给用户。在这个过程中,用户并不会意识到有多个处理器的存在,这个系统就像是一个处理器一样。 [1] 内聚性是指每一个数据库分布节点高度自治,有本地的数据库管理系统。透明性是指每一个数据库分布节点对用户的应用来说都是透明的,看不出是本地还是远程。在分布式数据库系统中,用户感觉不到数据是分布的,即用户不须知道关系是否分割、有无副本、数据存于哪个站点以及事务在哪个站点上执行等。  什么是微服务?维基上对其定义为:一种软件开发技术- 面向服务的体系结构(SOA)架构样式的一种变体,将应用程序构造为一组松散耦合的服务。在微服务体系结构中,服务是细粒度的,协议是轻量级的。微服务(或微服务架构)是一种云原生架构方法,其中单个应用程序由许多松散耦合且可独立部署的较小组件或服务组成。这些服务通常● 有自己的堆栈,包括数据库和数据模型;● 通过REST API,事件流和消息代理的组合相互通信;● 和它们是按业务能力组织的,分隔服务的线通常称为有界上下文。尽管有关微服务的许多讨论都围绕体系结构定义和特征展开,但它们的价值可以通过相当简单的业务和组织收益更普遍地理解:● 可以更轻松地更新代码。● 团队可以为不同的组件使用不同的堆栈。● 组件可以彼此独立地进行缩放,从而减少了因必须缩放整个应用程序而产生的浪费和成本,因为单个功能可能面临过多的负载。 

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值