pyflink map函数例子

[root@master pyflink]# cat k102.py 
from pyflink.datastream import StreamExecutionEnvironment

# 创建 StreamExecutionEnvironment 对象
env = StreamExecutionEnvironment.get_execution_environment()

# 读取文件,创建 DataStream 对象
data_stream = env.read_text_file('/root/pyflink/test.log')

# 对每行数据添加字符串 'aaaa'
new_stream = data_stream.map(lambda x:  'aaaa->'+x)

# 输出到控制台
new_stream.print()

# 执行任务
env.execute('Add "aaaa" to each line')

[root@master pyflink]# python k102.py 
4> aaaa->3333333333333333,ccccccccccccc
2> aaaa->222222233333333,hhhhhhhhhhhhh
3> aaaa->1111111111111111,aaaaaaaaaaaaaa
1> aaaa->4444444444444444,eeeeeeeeeeeee
4> aaaa->1111111111111111,ddddddddddddd
1> aaaa->111111122222222,ffffffffffffff
3> aaaa->2222222222222222,bbbbbbbbbbbbbb
[root@master pyflink]# cat test.log 
1111111111111111,aaaaaaaaaaaaaa
2222222222222222,bbbbbbbbbbbbbb
3333333333333333,ccccccccccccc
1111111111111111,ddddddddddddd
4444444444444444,eeeeeeeeeeeee
111111122222222,ffffffffffffff
222222233333333,hhhhhhhhhhhhh
[root@master pyflink]# python k102.py 
2> aaaa->1111111111111111,aaaaaaaaaaaaaa
2> aaaa->2222222222222222,bbbbbbbbbbbbbb
3> aaaa->3333333333333333,ccccccccccccc
3> aaaa->1111111111111111,ddddddddddddd
4> aaaa->4444444444444444,eeeeeeeeeeeee
4> aaaa->111111122222222,ffffffffffffff
1> aaaa->222222233333333,hhhhhhhhhhhhh

在上述代码中,map() 函数接受一个 lambda 表达式作为参数,用于对每行数据进行处理。lambda 表达式中的 

x 变量表示每行数据,x + 'aaaa' 表示将每行数据末尾添加字符串 'aaaa'。

最后通过 print() 方法将处理后的数据输出到控制台。

对数据流应用映射转换。转换调用的MapFunction

数据流的每个元素。每个MapFunction调用只返回一个元素。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

scan724

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值