從零建立賦能業(yè)務(wù)的數(shù)據(jù)中心「邏輯框架」
轉(zhuǎn)崗到業(yè)務(wù)公司新的數(shù)據(jù)團隊,需要從零開始建立數(shù)據(jù)中心,時常讓人無從下手。本文作者結(jié)合自身轉(zhuǎn)崗經(jīng)歷,根據(jù)實踐中的邏輯思路在文中詳實舉例,幫助數(shù)據(jù)分析師新人進一步學(xué)習(xí)數(shù)據(jù)庫的應(yīng)用,推薦迷茫中的數(shù)據(jù)分析師閱讀學(xué)習(xí)~
數(shù)據(jù)中心整體的思路是基于現(xiàn)有的業(yè)務(wù)系統(tǒng),接入數(shù)據(jù)后,將模型部署在前端,用于支持業(yè)務(wù)分析場景。
1. 項目目標(biāo)
此次項目希望能與你分享一個可以賦能業(yè)務(wù)的數(shù)據(jù)中心是如何從零開始構(gòu)思設(shè)計的,不過這并不是技術(shù)開發(fā)中數(shù)據(jù)倉庫,而是定位在用于數(shù)據(jù)分析工作的數(shù)據(jù)庫。
借此機會,也供剛接觸SQL的朋友,有一個更貼近業(yè)務(wù)現(xiàn)實的實戰(zhàn)案例。
2. 業(yè)務(wù)場景
為簡化業(yè)務(wù)邏輯,此次案例是基于電商企業(yè),涉及的業(yè)務(wù)部門有用戶運營部門、及產(chǎn)品部門。
我經(jīng)常說數(shù)據(jù)分析師的價值在于解決業(yè)務(wù)問題,那么此次的數(shù)據(jù)中心項目是在解決什么樣的解決問題,以及是如何解決的?我們來按「以終為始」的思考邏輯來梳理一番。
一、從業(yè)務(wù)層面思考,需要解決哪些業(yè)務(wù)問題
數(shù)據(jù)分析師的價值在于賦能業(yè)務(wù),所以「數(shù)據(jù)中心」建設(shè)的起點要從終點出發(fā):業(yè)務(wù)需求。
1. 用戶運營部門
隨著電商市場的飽和,現(xiàn)在電商進入存量運營時期,要求品牌對存量用戶進行精細(xì)化管理,并實現(xiàn)業(yè)務(wù)增長。因此用戶運營部門的需求是用戶價值的分層模型,可以幫助業(yè)務(wù)把精力集中在最高收益的人群。與用戶運營部門溝通,明確建立RFM模型對人群進行分層,并形成不同人群的營銷策略。
2. 產(chǎn)品部門
產(chǎn)品部門的職能大體能分為兩個方面:一個是需要前瞻市場的產(chǎn)品開發(fā),另一個是“確保子彈供及”的庫存管理。與產(chǎn)品部門溝通后,明確需求是要做「新品分析」,根據(jù)新品的表現(xiàn)情況,調(diào)整生產(chǎn)及庫存計劃。簡單點說就是表現(xiàn)好的新品,就多生產(chǎn)/進貨,反之則清倉處理。
二、從數(shù)據(jù)層面思考,需要解決哪樣的數(shù)據(jù)問題
到這一步,已經(jīng)明確了業(yè)務(wù)需求,接下來要建立能支撐業(yè)務(wù)發(fā)展的數(shù)據(jù)中心。
按數(shù)據(jù)處理流程,可以把數(shù)據(jù)中心分為:落地層、建模層、及數(shù)據(jù)層
1. 落地層
離業(yè)務(wù)最近,是業(yè)務(wù)看得見摸得著的數(shù)據(jù)應(yīng)用,比如在線BI系統(tǒng),業(yè)務(wù)可以直接登錄看到需要的報表;還可以是數(shù)據(jù)分析報告,業(yè)務(wù)從報告中獲得直接的洞察分析及建議;還可以是專項的數(shù)據(jù)分析項目,把通過分析形成的策略方案在業(yè)務(wù)場景下執(zhí)行,直接實現(xiàn)增長。也就是說,在這一層,需要考慮數(shù)據(jù)分析價值落地的具體形式。
2. 建模層
建模層和數(shù)據(jù)層都是業(yè)務(wù)部門不可感知的。建模層是支撐價值落地的數(shù)據(jù)模型,比如在線BI系統(tǒng)中的報表,背后復(fù)雜的表間關(guān)系,需要業(yè)務(wù)邏輯和表格模型支撐;數(shù)據(jù)分析報告背后的洞察分析,需要如帕累托分析、關(guān)聯(lián)算法等數(shù)據(jù)模型支撐。
3. 數(shù)據(jù)層
到這一層,就需要關(guān)注最小顆粒度的數(shù)據(jù),也就是數(shù)據(jù)庫層面的表格與字段,它們是建模層具體操作的要素。通俗地說,需要從不同數(shù)據(jù)源中接入業(yè)務(wù)數(shù)據(jù),并通過同步更新、數(shù)據(jù)清洗等過程確保數(shù)據(jù)的完整性及準(zhǔn)確性。
三、如何把業(yè)務(wù)需求轉(zhuǎn)為數(shù)據(jù)問題
了解完數(shù)據(jù)賦能的三個層次,回過頭來看看如何把業(yè)務(wù)需求轉(zhuǎn)為數(shù)據(jù)問題。
1. 用戶運營
(1)落地層
業(yè)務(wù)部門都有KPI指標(biāo),在運營工作中,需要定期回顧運營成效及執(zhí)行下一階段的運營策略。對業(yè)務(wù)來說,運營策略的落地需要借助觸達(dá)工具:發(fā)短信。因此,「RFM模型」的落地不能只是給出算法模型報告,而是要以報表的形式,對存量用戶進行分群的同時,搭配策略分析工具,并提供用戶信息下載
根據(jù)業(yè)務(wù)場景,確定可以通過PowerBI在線報表的形式,為用戶運營部門提供在線人群分層報表,并交叉零售行業(yè)常用的「人貨場模型」及「指標(biāo)拆解」作為策略分析工具。
(2)建模層
明確了落地的形式后,需要對背后的「RFM模型」和「人貨場模型」及「指標(biāo)拆解」進行數(shù)據(jù)層面的定義。
- 對于「RFM模型」來說,需要明確分層邏輯,具體包括行為周期、R/F/M的閾值計算。
- 對于「人貨場模型」來說,在RFM模型已解決「人」層面的分析,需要進一步補充:「貨」通過「產(chǎn)品結(jié)構(gòu)分析」解決,「場」通過「活動周期分析」解決。
- 對于「指標(biāo)拆解」來說,因為最終是交付給用戶運營部門,所以需要盡量從用戶的角度來拆解銷售額,比如銷售額 = 新客銷售 + 老客銷售,這樣就符合業(yè)務(wù)關(guān)注的新客指標(biāo)及老客指標(biāo)。
(3)數(shù)據(jù)層
明確了需要開發(fā)的數(shù)據(jù)模型,需要對更細(xì)顆粒度的數(shù)據(jù)庫表格及字段進行設(shè)計。
- 模型圍繞著用戶訂單數(shù)據(jù)進行,所以至少需要訂單表,包括下單時間、購買商品、購買金額、商品件數(shù)等字段。
- 另外,落地層提到用戶運營側(cè)的落地需要結(jié)合觸達(dá)工具,所以還需要用戶表,提供會員昵稱、手機號、地址等字段。
2. 產(chǎn)品部門
(1)落地層
對于企業(yè)來說,產(chǎn)品策略背后的影響因素多且復(fù)雜,比如市場培育、公司戰(zhàn)略等。也就是說,對于數(shù)據(jù)部門來說,做的新品分析或許更多只是輔助工作,供產(chǎn)品部門參考新品表現(xiàn)。此外,與產(chǎn)品部門溝通業(yè)務(wù)流程時,他們還提及日常還會用數(shù)據(jù)部門提供的表格做二次分析。
根據(jù)此業(yè)務(wù)場景,確定可以通過Metabase平臺的形式做在線報表,業(yè)務(wù)部門能在平臺上下載數(shù)據(jù)的同時,也可以在線做透視分析。
此場景其實為了介紹Metabase平臺設(shè)計的,該工具在解決業(yè)務(wù)們自助取數(shù),及簡單BI報表方面很實用??梢韵韧ㄟ^官網(wǎng)了解:www.metabase.com。后面會有具體的教程出來。
(2)建模層
明確了以報表形式提供新品分析后,需要考慮新品分析背后的表格模型,可以結(jié)合「存銷分析」來實現(xiàn),即分析新品的銷售與庫存之前的相關(guān)指標(biāo),體現(xiàn)新品表現(xiàn)。
(3)數(shù)據(jù)層
銷售及庫存相關(guān)的指標(biāo)分析,需要用到訂單表、庫存表,除了用戶運營提及的訂單字段外,還需要貨品批次號、數(shù)量等庫存字段。
至此,我們完成了從業(yè)務(wù)需求出發(fā),到落地層、建模層及數(shù)據(jù)層的倒推,形成了數(shù)據(jù)賦能業(yè)務(wù)的整體框架:
(后續(xù)會豐富此框架)
四、從執(zhí)行層面思考,把框架落地
接下來,需要逆著第二步的思考邏輯,形成執(zhí)行計劃。
1. 數(shù)據(jù)層
- 建立數(shù)據(jù)庫模型:從業(yè)務(wù)模型、概念模型到物理模型。
- 新建數(shù)據(jù)庫,并從數(shù)據(jù)源(業(yè)務(wù)系統(tǒng))接入存量數(shù)據(jù)。
- 通過存儲過程同步增量數(shù)據(jù),實現(xiàn)數(shù)據(jù)動態(tài)更新。
- SQL SERVER代理完成定時任務(wù):執(zhí)行ETL、定期備份。
2. 建模層
- RFM模型在用戶運營中的落地。
- 如何進行新品分析。
3. 落地層
- RFM模型在PowerBI的部署落地
- Metabase的安裝及應(yīng)用案例:存銷分析
接下來會按照上述計劃,逐步實現(xiàn)數(shù)據(jù)中心的落地。
本文由 @餅干哥哥 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)作者許可,禁止轉(zhuǎn)載。
題圖來自Unsplash,基于CC0協(xié)議。
- 目前還沒評論,等你發(fā)揮!