AWS更新ETL服务推Glue 2.0作业启动速度是前一代的10倍

互联网2021-02-12 08:01:37
最佳答案

AWS更新其ETL(Extract、Transform、Load)服务释出AWS Glue 2.0,能够执行Spark ETL作业,启动时间较前一代还要快10倍,最小计费时间更短,可被灵活地用来处理互动性高的工作负载。目前AWS Glue 2.0已经在美东、欧洲、亚太、中东和南美各区上线。

AWS Glue是一项无伺服器ETL服务,使用者无需配置或是管理主机,能够简单地準备和载入需要分析的资料。最新的Glue服务,主打能快速启动的Spark ETL作业,启动速度是前一代的10倍,官方提到,启动等待时间减少,可以降低整体作业时间,而且透过脚本开发和资料探索,能良好地支援微批次、高互动性的工作负载,并提升生产力。

除此之外,AWS Glue 2.0的Spark作业能以每秒计费,而且还降低了最小计费时间,从原本最少计费时间10分钟降到了1分钟,如此用户能够以更划算的价格,将AWS Glue灵活地用来处理较小且互动性高的工作负载。

AWS提到,因为AWS Glue 2.0的启动作业速度更快,用户能够更可靠地执行SLA资料工作管线,并且使资料探索和实验更具互动性。另外,AWS Glue 2.0还有一项新功能,能让用户从Wheel档案或是储存库中,安装Python模组。

免责声明:本文为转载,非本网原创内容,不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。