AWS
文章平均质量分 81
Norris Huang
这个作者很懒,什么都没留下…
展开
-
通过 AWS Glue 同步 MaxCompute 数据到 S3
从上一步骤创建好 Connector 页面中,直接点击右上角的 Create connection,打开创建 Connection 的页面。,创建一个新的对象,在 Key/Value 中分别填写 accessId,accessKey 对应在阿里云实际的用户ID和key。(版本会影响方案的成功,4.x 以上版本验证是不可行的)在 Glue 创建 Connection 页面选中上一步骤创建好的 Secret 对象。点击 Create ,这样就创建好 MaxComputer 的连接。Name 自定义填写。原创 2024-05-15 16:24:44 · 604 阅读 · 0 评论 -
AWS-EMR & Airflow 调度hivesql 异常thrift.transport.TTransport.TTransportException: TSocket read 0 bytes
增加 hive.server2.authentication 设置为NOSASL。通过Airflow 调用 EMR 中的hive 执行sql,遇到错误异常。修改hive-site.xml。原创 2022-10-13 22:12:55 · 1317 阅读 · 1 评论