MaxCompute 省省省官方攻略

      最后更新:2020-04-18 10:59:49 手机定位技术交流文章

      如需查看精彩视频,请点击:MaxCompute详细说明。

      以下是一个精彩的视频内容安排:在用户使用MaxCompute之前,他们将考虑两个主要问题:成本和业务。一些企业正处于快速发展时期,对经营业绩有较高的要求。例如,计算业务对资源的需求是灵活的,有明显的高峰和低谷。一段时间内,对资源的需求很高,而另一段时间,对资源的需求相对较低。这种业务优先于成本。也有一些企业有严格的预算要求。例如,从事合同制的企业在早期必须有明确的预算,但对绩效的要求不是很高。他们只需要能够在同一天完成任务。基于上述两种情况,MaxCompute引入了一系列电网和充电方法。

      预检方式

      最大计算服务模式

      MaxCompute有两种服务模式,即按量计费和按年计费。打开MaxCompute相当于注册服务并生成一个约定的订单。订单成功后即可使用该服务。批量计费是指整个订单的计费方式是使用后进行批量计费,包括计算、存储和下载等几个主要功能。开业时是0元。如果开封后不使用,不会产生费用。包年包月是指订单收费模式为混合模式,计算资源按包年包月预付费,存储和下载按使用后数量收费。打开时需要提前支付计算资源。

      最大计算计费方法

      MaxCompute费用由三部分组成:存储费、计算费和下载费。

      存储费用根据存储数据容量的大小逐步收取。每月包装中有固定的储存量,超出的部分根据数量收取费用。计算费用包括SQL任务、MapReduce任务、闪电任务和火花任务。当SQL任务按数量支付时,如果是标准版本,则根据输入数据量和SQL的复杂性进行计算。如果是开发人员版本,则计算基于计算输入。在购买软件包的计算资源之后,没有额外的费用。当根据数量支付时,MapReduce任务根据计算任务消耗的计算时间计费。在购买软件包的计算资源之后,没有额外的费用。闪电任务基于查询输入。当按数量支付火花任务时,根据计算任务消耗的计算时间来计算火花任务。在购买软件包的计算资源之后,没有额外的费用。下载费用根据从公共网络下载的流量收取。从内部网上传或下载不收费。规格介绍

      按体积收费

      计费-标准版

      按存储容量使用计费包括标准版本和开发人员版本。标准版本的计算资源是非常灵活的计算资源,并且资源池是共享的。计算任务是按需抢占的,使用量无法指定或限制。包括SQL(包括UDF)、MapReduce、Spark、交互式分析(闪电)、图形和其他计算类型的资源。存储资源的资源池是共享的、按需存储的,并且没有使用限制。包括表和资源等存储。用于上传和下载数据资源的资源库是共享类型的,并且可以按需抢占。不能指定使用量,也没有使用限制。主要包括隧道上传和下载资源。根据计费指令的标准版本,计算资源费用基于每种计算类型任务的使用情况。目前,只有SQL、MR、Spark和交互式分析计算任务具有计费功能。存储费用只对表中存储的容量收费。容量是压缩数据。数据上传和下载费用指免费数据上传至MaxCompute通过公共网络下载只能按数量收费。

      按批量计费-开发者版

      计算资源库的开发人员版本属于共享类型。计算任务根据需要获取资源,并且不能指定使用量。仅提供了最大计算SQL (UDF和平壤计算资源。一个区域中只有一个项目可以选择使用开发人员资源;每个项目的最大并发作业数为5;单个作业最多只能占用10CU的计算资源。存储资源的资源库是按需共享和存储的。每个项目的最大存储容量限制为500GB(包括临时数据大小)。如果存储容量超过500GB,则无法存储。这两个因素的限制使得开发者版资源不适合作为生产资源。用于上传和下载数据资源的资源库是共享类型的,并且可以按需抢占。不能指定使用量,也没有使用限制。主要包括隧道上传和下载资源。根据开发者版的计费指令,计算资源(CU)被收费:计算作业根据扫描的数据量被收费。每月免费计算价值100元,即每月可以免费扫描666GB数据的工作量,超出部分将按量收费。存储费用:每项空可以免费,只能存储500GB的资源。数据上传和下载费用:数据上传至MaxCompute免费;通过公共网络下载只能按数量收费。

      每年和每月

      包年、包月-标准计算资源

      计算资源包括计算资源单元和未预留的计算资源。计算资源单位是保留的计算资源,是必需的资源。资源池是独占的,资源是根据购买的CU量来分配的。非保留计算资源是可选资源,资源数量为

      对于按容量付费模式下的计算资源使用,一旦按容量付费模式被激活,用户将有权使用共享资源池,并且将同时创建一个或多个项目来指定资源池的使用情况。MaxCompute将共享资源池指定为默认资源组。创建MaxCompute项目时,只要您选择按存储容量使用计费模式,项目将绑定到此默认公共资源组。当任务在项目中启动时,资源库的资源将根据需要被占用。它的优点在于使用灵活,不需要管理资源,只需要根据业务规划项目。关键提醒是需要配置相关的消费监控警报,以避免意外的高额账单。对于现收现付中存储资源的使用,没有使用限制,不需要关注存储资源,只需要根据业务需求存储数据。关键提醒是要管理好数据生命周期。当有多个项目时,数据将集中存储,同时满足业务需求。

      当购买保留的计算资源时,将使用保留的计算资源,并且将激活“标准计算资源”模式。同时,非预留计算资源将为0。或者选择3个包中的任何一个,而未预留的计算资源为0。

      当使用未预留的计算资源时,在购买了打包的年和月计算资源之后,系统将默认分配一个资源组,该资源组仅包含预留的计算资源。您可以在MaxCompute butler中创建辅助配额组细分资源。如果没有细分,则1中只有默认配额组。在项目指定使用包年和月计算资源(默认配额组)后,转到MaxCompute管家以指定特定配额组。项目中的单个任务可以通过配额标记功能根据业务需求分配给其他辅助配额组执行。

      在购买未预留的计算资源时,中国只有上海、北京、杭州和深圳四个地区可供购买,而其他地区不开放。有两种购买方式,组合购买和个人购买,同时也要根据自己的业务需要购买。

      组合购买,即购买标准计算资源或包的同时购买未预留的计算资源。购买100立方和300电子控制单元后,系统将默认分配一个资源组。您可以在MaxCompute butler中创建辅助配额组细分资源。一组默认为100立方英尺,另一组为300电子控制单元。在项目指定使用默认配额组后,转到MaxCompute butler以指定特定的配额组。项目中的单个任务可以通过配额标记功能根据业务需求分配给其他辅助配额组执行。如果没有细分,这种方法将优先使用保留的资源。通过细分保留的资源,可以执行一些重要的任务,而非保留的资源可以执行具有高峰值和低性能要求的任务。

      单独购买,即只购买和使用未预留的计算资源。购买300eccu后,默认定额组中会有300eccu,项目中的所有任务都会使用默认定额组的计算资源。所有规格都可以在不同模式下切换。例如,开发人员版本可以切换到标准版本,但是标准版本不能切换到开发人员版本。当使用包年和月时,打开后只能选择一个规范,当需要时,可以通过升级和降级页面切换到另一个规范。项目创建时,首先选择按批量支付,在使用时也可以切换到包年月资源,或者在第一次选择时切换到按批量支付。

      在实际使用中,也可以根据业务需求,同时采用年、月、量三种计费方式的混合使用。例如,任务有大量的业务数据,但时间要求不高。按数量收费不划算。你可以利用每月和每年的资源来缓慢地完成任务。另一个例子是,任务需要专注于确保时间和峰值非常高。如果根据峰值按月购买,则闲置大量时间不划算,如果购买较少,则峰值和时间无法保证。因此,可以根据数量将其放入计费资源中。

      例子

      案例1:按容量计算的最大计算费用

      如上图所示,本案例的需求特点是业务处于快速发展阶段,数据基线要求高,集群利用率低,50%以上的业务处于闲置状态,计算峰值是平均水位的2倍以上。此时,推荐的规范是按量付费,并且该业务正处于快速发展时期。与IDC自建的集群相比,MaxCompute可以节省集群的运行和维护成本,而灵活的资源可以满足爆炸性分析资源的需求。

      案例2: MaxCompute包

      这种情况的需求的特点是严格的成本控制,特别注意低质量的SQL对计费的影响。如果是预算合同,按数量估算成本就不容易了。在初期阶段,可以评估平均日作业量和数据量,计算峰值所需的岩心数量是平均水位的5倍,但对生产性能要求不高。此时,推荐的规格是包的年度和月份的预留资源加上非预留预付款。如上图所示,重要服务通过预留独占计算资源和非预留系统抢占计算资源来保证,非预留资源被用作非保证服务的峰值扩展资源。

      本文由 在线网速测试 整理编辑,转载请注明出处,原文链接:https://www.wangsu123.cn/news/4718.html

          热门文章

          文章分类