騰訊云:ASW工作流最佳實(shí)踐(二):使用ASW并發(fā)調(diào)用函數(shù)

來源: TencentServerless
作者:susu
時(shí)間:2021-05-18
17554
在音視頻轉(zhuǎn)碼、ETL作業(yè)處理、基因數(shù)據(jù)處理等諸多場(chǎng)景中,我們都可以通過工作流并行調(diào)用云函數(shù),將任務(wù)進(jìn)行并行處理,大大提高任務(wù)處理的吞吐量,滿足應(yīng)用場(chǎng)景的高實(shí)時(shí)性、高并發(fā)能力。

在音視頻轉(zhuǎn)碼、ETL作業(yè)處理、基因數(shù)據(jù)處理等諸多場(chǎng)景中,我們都可以通過工作流并行調(diào)用云函數(shù),將任務(wù)進(jìn)行并行處理,大大提高任務(wù)處理的吞吐量,滿足應(yīng)用場(chǎng)景的高實(shí)時(shí)性、高并發(fā)能力。

本期文章主要分享如何使用ASW的Map節(jié)點(diǎn)能力進(jìn)行并發(fā)的數(shù)據(jù)求和計(jì)算。

01.

創(chuàng)建函數(shù)

1.登錄「云函數(shù)控制臺(tái)」,創(chuàng)建一個(gè)函數(shù)名稱為Sum,運(yùn)行環(huán)境為Python 3.6的云函數(shù)。

云函數(shù)控制臺(tái)地址:https://console.cloud.tencent.com/scf

# -*- coding: utf8 -*-

import json 

def main_handler(event, context):

    sum = 0

    for i in event["values"]:

        sum += i

    return sum

640.webp (1).jpg

02.

創(chuàng)建工作流

1.登錄「應(yīng)用與編排服務(wù)流控制臺(tái)」,在工作流頁(yè)面,單擊「新建」,進(jìn)入創(chuàng)建工作流頁(yè)面,單擊「入門模板」,選擇「Map循環(huán)」模板。

ASW中Map節(jié)點(diǎn)會(huì)遍歷輸入中的某個(gè)數(shù)組類型參數(shù),對(duì)于數(shù)組中的每個(gè)元素并行執(zhí)行其串行節(jié)點(diǎn)。Map節(jié)點(diǎn)類似于編程語言中的foreach,但節(jié)點(diǎn)循環(huán)任務(wù)是并發(fā)執(zhí)行的。

ASW控制臺(tái)地址:https://console.cloud.tencent.com/asw

640.webp.jpg

2.修改「代碼」中Iterator下States節(jié)點(diǎn)中的state01為sum函數(shù)調(diào)用,如下工作流定義:

{

 "Comment": "使用Map節(jié)點(diǎn)循環(huán)處理數(shù)組array中的數(shù)據(jù)",

 "StartAt": "MapState",

 "States": {

  "MapState": {

   "Type": "Map",

   "ItemsPath": "$.array",

   "ResultPath": "$.result",

   "MaxConcurrency": 2,

   "Next": "FinalState",

   "Iterator": {

    "StartAt": "State01",

    "States": {

     "State01": {

      "Type": "Task",

      "Comment": "調(diào)用求和函數(shù)",

      "Resource": "qrn:qcs:asw:ap-guangzhou:123456789:sdk:json:qcloud:scf:Invoke/sum/$DEFAULT/default",

      "End": true

     }

    }

   }

  },

  "FinalState": {

   "Type": "Pass",

   "End": true

}

ItemsPath指定作為了Map節(jié)點(diǎn)循環(huán)的數(shù)組。

MaxConcurrency指定了Map節(jié)點(diǎn)并發(fā)調(diào)用的函數(shù)數(shù)量。

Iterator為Map節(jié)點(diǎn)循環(huán)任務(wù)定義。

3.單擊「下一步」,在「配置基本信息」頁(yè)面,輸入工作流名稱,選擇運(yùn)行角色與工作流類型,單擊「完成」,完成工作流創(chuàng)建。

640.png

03.

運(yùn)行工作流

1.在工作流列表,單擊「名稱」鏈接進(jìn)入工作流,您在彈出的「開始執(zhí)行」窗口中,以JSON格式輸入array數(shù)組。例如:

640 (1).png

{

 "array": [{

   "values": [1, 2, 3, 4, 5]

  },

  {

   "values": [4, 2, 3, 1, 5]

  },

  {

   "values": [1, 0, 8, 4, 5]

  },

  {

   "values": [7, 2, 3, -2, 5]

  }

 ]

}

2.單擊「確定」,完成狀態(tài)執(zhí)行后,可以在詳情頁(yè)查看執(zhí)行結(jié)果?;瑒?dòng)至頁(yè)面最下方,在「執(zhí)行歷史記錄」下,您可以查看子節(jié)點(diǎn)的運(yùn)行情況。我們可以看到Map節(jié)點(diǎn)會(huì)以并發(fā)數(shù)(MaxConcurrency)為2來調(diào)用sum函數(shù),每個(gè)sum函數(shù)的入?yún)閍rray數(shù)組的一個(gè)item。

640.webp (1).jpg

3.單擊「資源」中的云函數(shù)鏈接,可以直接跳到云函數(shù)控制臺(tái),查看函數(shù)執(zhí)行詳情。

640.webp (2).jpg

立即登錄,閱讀全文
版權(quán)說明:
本文內(nèi)容來自于TencentServerless,本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個(gè)人觀點(diǎn),不代表快出海對(duì)觀點(diǎn)贊同或支持。如有侵權(quán),請(qǐng)聯(lián)系管理員(zzx@kchuhai.com)刪除!
相關(guān)文章
騰訊云數(shù)據(jù)庫(kù)PostgreSQL全面支持PG 17
騰訊云數(shù)據(jù)庫(kù)PostgreSQL全面支持PG 17
即日起,騰訊云PostgreSQL全面支持PostgreSQL 17.0。所有用戶可使用大版本升級(jí)能力升級(jí)至最新的PostgreSQL 17.0進(jìn)行體驗(yàn),也可以在產(chǎn)品購(gòu)買頁(yè)直接購(gòu)買。
騰訊云
云服務(wù)
2024-12-152024-12-15
高可用這個(gè)問題,加機(jī)器就能解決?
高可用這個(gè)問題,加機(jī)器就能解決?
互聯(lián)網(wǎng)服務(wù)的可用性問題是困擾企業(yè)IT人員的達(dá)摩克利斯之劍:防于未然,體現(xiàn)不出價(jià)值。已然發(fā)生,又面臨P0危機(jī)。就更別提穩(wěn)定性建設(shè)背后顯性的IT預(yù)算問題與隱性的人員成本問題。
騰訊云
云服務(wù)
2024-11-252024-11-25
TDSQL TDStore引擎版替換HBase:在歷史庫(kù)場(chǎng)景中的成本與性能優(yōu)勢(shì)
TDSQL TDStore引擎版替換HBase:在歷史庫(kù)場(chǎng)景中的成本與性能優(yōu)勢(shì)
HBase憑借其高可用性、高擴(kuò)展性和強(qiáng)一致性,以及在廉價(jià)PC服務(wù)器上的低部署成本,廣泛應(yīng)用于大規(guī)模數(shù)據(jù)分析。
騰訊云
云服務(wù)
2024-11-042024-11-04
復(fù)雜查詢性能弱,只讀分析引擎來幫忙
復(fù)雜查詢性能弱,只讀分析引擎來幫忙
隨著當(dāng)今業(yè)務(wù)的高速發(fā)展,復(fù)雜多表關(guān)聯(lián)的場(chǎng)景越來越普遍。但基于行式存儲(chǔ)的數(shù)據(jù)庫(kù)在進(jìn)行復(fù)雜查詢時(shí)性能相對(duì)較弱。
騰訊云
云服務(wù)
2024-11-022024-11-02
優(yōu)質(zhì)服務(wù)商推薦
更多
掃碼登錄
打開掃一掃, 關(guān)注公眾號(hào)后即可登錄/注冊(cè)
加載中
二維碼已失效 請(qǐng)重試
刷新
賬號(hào)登錄/注冊(cè)
小程序
快出海小程序
公眾號(hào)
快出海公眾號(hào)
商務(wù)合作
商務(wù)合作
投稿采訪
投稿采訪
出海管家
出海管家