用數(shù)據(jù)流處理復(fù)雜數(shù)據(jù)
什么是數(shù)據(jù)流?可以把數(shù)據(jù)流想象成一個生產(chǎn)流水線,可以從流水線的一頭輸入表單數(shù)據(jù),經(jīng)過流水線各個環(huán)節(jié)的處理,從流水線的另一端輸出經(jīng)過處理后的數(shù)據(jù)。
入口
分析->數(shù)據(jù)流
基本操作
界面布局
點擊“創(chuàng)建數(shù)據(jù)流”后進(jìn)入數(shù)據(jù)流設(shè)計頁面。設(shè)計界面分為:節(jié)點選擇區(qū)、數(shù)據(jù)流設(shè)置區(qū)和節(jié)點設(shè)置區(qū)。

操作方式
- 節(jié)點選擇區(qū):可拖拽節(jié)點添加到數(shù)據(jù)流設(shè)置區(qū) 。
- 數(shù)據(jù)流設(shè)置區(qū):設(shè)置數(shù)據(jù)流的流轉(zhuǎn);選中一個節(jié)點名,則頁面底部將顯示節(jié)點設(shè)置區(qū),可對節(jié)點進(jìn)行設(shè)置。
- 節(jié)點設(shè)置區(qū):對節(jié)點進(jìn)行詳細(xì)配置,使得數(shù)據(jù)流按照既定規(guī)則處理加工數(shù)據(jù)。
節(jié)點介紹
- 添加節(jié)點
輸入節(jié)點指選擇要處理的數(shù)據(jù),即數(shù)據(jù)源,可選擇單一表單作為數(shù)據(jù)源,也可選擇多個表單。 點擊“+數(shù)據(jù)源”則系統(tǒng)會自動添加一個輸入節(jié)點及輸出節(jié)點。點擊輸入節(jié)點即可選擇數(shù)據(jù)表單及表單字段,如下圖

- 節(jié)點連線
節(jié)點之間用連接線相連即可。
- 節(jié)點對齊
提供水平等距、垂直等距、水平對齊、垂直對齊四種對齊方式.全選要對齊的節(jié)點后,點擊任意一種對齊方式即可。

- 數(shù)據(jù)預(yù)覽
點擊輸出節(jié)點后會顯示數(shù)據(jù)流的整合數(shù)據(jù)預(yù)覽。

或點擊數(shù)據(jù)流卡片進(jìn)入數(shù)據(jù)詳情頁面查看。

輸入
相當(dāng)于流水線的輸入。一個數(shù)據(jù)流可以有多個輸入,輸入均為表單數(shù)據(jù)。選擇表單后,還可以選擇輸入的字段。子表數(shù)據(jù)也可以作為輸入字段。當(dāng)同時選擇主表字段和子表字段作為輸入字段時,數(shù)據(jù)將會將主子表展開作為普通的二維表輸入

輸出
相當(dāng)于流水線的輸出。一個數(shù)據(jù)流只能有一個輸出。輸出的數(shù)據(jù)可以理解為一個新的表單,但只能查看,不能修改??梢宰鳛閳蟊?、儀表盤、表單填寫關(guān)聯(lián)的數(shù)據(jù)源。
數(shù)據(jù)處理
相當(dāng)于流水線上的各處理環(huán)節(jié)。支持橫向連接、追加合并、分組匯總、數(shù)據(jù)篩選和字段設(shè)置等幾種數(shù)據(jù)處理方式。
橫向連接
將兩個表的數(shù)據(jù)左右拼接在一起。超過2個表時可通過多次拼接實現(xiàn)。即A1、A2拼接成A,B1、B2拼接成B,A和B再拼接成C。如果你對SQL有一定了解,可以用如下SQL進(jìn)行類比:
連接方式 | 類似的SQL |
---|---|
橫向連接(左連接) | SELECT a.fieldA,b.fieldB FROM tableA a LEFT JOIN tableB b ON a.id=b.id |
橫向連接(內(nèi)連接) | SELECT a.fieldA,b.fieldB FROM tableA a INNER JOIN tableB b ON a.id=b.id| |

追加合并
將兩個表的數(shù)據(jù)上下拼接在一起,最多支持5個表的拼接,超過5個表時可以通過多次拼接實現(xiàn)。如果你對SQL有一定了解,可以用如下SQL進(jìn)行類比:
連接方式 | 類似的SQL |
---|---|
追加合并 | SELECT a.fieldA,a.fieldB FROM tableA a union SELECT b.fieldC,b.fieldD FROM tableA b |

分組匯總
對輸入二維表的數(shù)據(jù)進(jìn)行分組匯總。如果你對SQL有一定了解,可以用如下SQL進(jìn)行類比:
處理方式 | 類似的SQL | 說明 |
---|---|---|
分組匯總 | SELECT fieldA,SUM(fieldB) FROM tableA GROUP by fieldA | 分組字段fieldA,匯總字段fieldB,匯總方式為求和 |

過濾篩選
對輸入二維表的數(shù)據(jù)進(jìn)行數(shù)據(jù)篩選。支持多條件篩選,用并且(and)、或者(or)進(jìn)行連接.

字段設(shè)置
對字段進(jìn)行一些基本的設(shè)置,如截取、轉(zhuǎn)化、重命名等。支持利用函數(shù)和公式對字段進(jìn)行設(shè)置。

輸出表使用
通過數(shù)據(jù)流處理后輸出的表單,可以在表單中進(jìn)行調(diào)用。目前支持:
1、作為填寫關(guān)聯(lián)數(shù)據(jù)源
和正常的填寫關(guān)聯(lián)設(shè)置類似。點擊設(shè)置后,選擇數(shù)據(jù)源時,選擇數(shù)據(jù)流名稱即可。

2、作為報表數(shù)據(jù)源
將數(shù)據(jù)流輸出表作為報表的數(shù)據(jù)源,進(jìn)行統(tǒng)計分析。

3、作為應(yīng)用儀表盤數(shù)據(jù)源
數(shù)據(jù)流輸出表同樣可以在應(yīng)用儀表盤內(nèi)進(jìn)行展示、統(tǒng)計分析。

1、數(shù)據(jù)流設(shè)計好后需要啟用才能正式生效,啟用時,會對數(shù)據(jù)源中的所有數(shù)據(jù)進(jìn)行初始化處理。如果原表單中的數(shù)據(jù)量較大,啟用可能需要較長的時間。
2、啟用后的數(shù)據(jù)流如果要修改,需要先停用。
3、如果數(shù)據(jù)源中的表單數(shù)據(jù)發(fā)生變化,數(shù)據(jù)流的數(shù)據(jù)也會相應(yīng)改變
4、目前不支持在數(shù)據(jù)流中選擇的字段:收費項目、商品字段、預(yù)約字段、多選框字段、上傳文件字段。