作為一家以產(chǎn)品和技術(shù)取勝的公司,神策數(shù)據(jù)秉承把事情做到極致的精神,一直堅持在技術(shù)上迭代創(chuàng)新,永無止境地追求用更少的硬件資源處理更多的數(shù)據(jù),且保持查詢速度不斷提升。隨著服務(wù)的行業(yè)越來越多,神策數(shù)據(jù)在向客戶學(xué)習(xí)的過程中也不斷調(diào)整產(chǎn)品方法論和整體信息架構(gòu),補充產(chǎn)品功能,完善產(chǎn)品易用性。在神策2020數(shù)據(jù)驅(qū)動用戶大會現(xiàn)場,神策數(shù)據(jù)聯(lián)合創(chuàng)始人&CTO曹犟代表神策數(shù)據(jù),詳細介紹神策數(shù)據(jù)近期在技術(shù)和產(chǎn)品方面取得的新進展。本文內(nèi)容根據(jù)現(xiàn)場演講整理而成。
一、不止是用戶行為數(shù)據(jù)分析工具,更是全新的數(shù)字化營銷閉環(huán)解決方案 從數(shù)據(jù)角度而言,神策數(shù)據(jù)處理的不僅僅是用戶行為數(shù)據(jù),還包括第三方電商數(shù)據(jù)、廣告數(shù)據(jù)、第一方如CRM、卡券系統(tǒng)等業(yè)務(wù)數(shù)據(jù),貫通整合多渠道多類型數(shù)據(jù)源;從產(chǎn)品角度而言,神策數(shù)據(jù)也不僅僅提供一個數(shù)據(jù)分析工具,而是一個基于企業(yè)數(shù)據(jù)流的完整的數(shù)字化營銷閉環(huán)解決方案。 在詳解該話題之前,曹犟先與大家介紹了神策數(shù)據(jù)的產(chǎn)品演進,他認為,產(chǎn)品理念決定產(chǎn)品布局。在創(chuàng)業(yè)之初,神策數(shù)據(jù)就一直強調(diào)數(shù)據(jù)源的重要性,強調(diào)數(shù)據(jù)根基,強調(diào)數(shù)據(jù)驅(qū)動,強調(diào)自助式數(shù)據(jù)分析,強調(diào)數(shù)據(jù)可以在業(yè)務(wù)決策和產(chǎn)品智能兩方面發(fā)揮作用。在過去5年里,隨著服務(wù)的行業(yè)和客戶越多,收集到需求也越廣泛,團隊在產(chǎn)品理念、數(shù)字化經(jīng)營有了更多的認識,提出全新的SDAF運營框架,把整個數(shù)字化營銷活動劃分為感知(Sense)、決策(Decision)、行動(Action)、反饋(Feedback)四大環(huán)節(jié)。 基于全新的產(chǎn)品理念,神策數(shù)據(jù)團隊重新調(diào)整了整個產(chǎn)品矩陣設(shè)計。按照全新的SDAF運營框架,將神策分析、神策用戶畫像、神策智能運營、神策智能推薦、神策客景等產(chǎn)品,從一個個單獨的產(chǎn)品重新整合成數(shù)據(jù)根基、分析云、營銷云三大部分。 神策數(shù)據(jù)根基部分,由數(shù)據(jù)治理平臺、數(shù)據(jù)倉庫、數(shù)據(jù)智能引擎、私有云平臺4個基礎(chǔ)部分組成;神策分析云部分,不僅整合了全新升級后的用戶行為分析、用戶畫像、指標(biāo)預(yù)警、掌上神策等功能組件,還包括最近新推出的經(jīng)營數(shù)據(jù)分析、廣告分析等全新功能模塊,提供更加全面、廣泛的分析能力;神策營銷云部分,完整地提供了彈窗、流程畫布、內(nèi)容管理、標(biāo)簽在線服務(wù)等一系列新功能,幫助客戶完整地實現(xiàn)數(shù)據(jù)應(yīng)用,打通數(shù)據(jù)驅(qū)動閉環(huán)的最后一節(jié)。同時,神策數(shù)據(jù)依然堅持數(shù)據(jù)驅(qū)動的咨詢服務(wù),堅持以產(chǎn)品+服務(wù)的方式為客戶創(chuàng)造價值。
二、數(shù)據(jù)根基:采、傳、治、存、查、智 數(shù)據(jù)采集是一切數(shù)據(jù)應(yīng)用的基礎(chǔ),在全新的SDAF運營框架之下,神策數(shù)據(jù)根基則從數(shù)據(jù)采集擴展成了整個數(shù)據(jù)流,包括采集、傳輸、治理、存儲、查詢、智能引擎這幾個部分。下面將圍繞其中幾個重點部分,展開介紹。 1.數(shù)據(jù)采集 神策數(shù)據(jù)堅持開源策略,目前已開源40+SDK,不斷完善SDK矩陣,覆蓋主流開發(fā)生態(tài)。同時,整個SDK團隊在Flutter全埋點、React Native全埋點、Kotlin全埋點、SwiftUI全埋點、APP與H5打通等方面都有了全新的技術(shù)突破。隨著服務(wù)群體的擴大,神策團隊也在支持更復(fù)雜場景的數(shù)據(jù)采集,比如如何去更加自動化地采集曝光數(shù)據(jù)?如何適配機頂盒車機等一些終端?同時也在嘗試一些更便捷智能的采集方案,比如如何讓事件屬性能夠做動態(tài)的可視化關(guān)聯(lián)?如何讓整個數(shù)據(jù)采集工作變得更加場景化、行業(yè)化、智能化?在全新的產(chǎn)品戰(zhàn)略下,神策采集的數(shù)據(jù)已經(jīng)不再局限于用戶行為數(shù)據(jù),還包括各種私域、公域數(shù)據(jù),同時,也會持續(xù)以產(chǎn)品化的方式,來優(yōu)化解決數(shù)據(jù)采集方案。 2.數(shù)據(jù)治理 在數(shù)據(jù)治理方面,神策提出面向業(yè)務(wù)的“螺旋式”數(shù)據(jù)治理理念,將數(shù)據(jù)治理分為三個階段:關(guān)注源頭、關(guān)注波動、全面掌控。 第一階段——關(guān)注源頭。在建設(shè)數(shù)據(jù)的初期,重點關(guān)注數(shù)據(jù)的質(zhì)量,強調(diào)從需求到測試按規(guī)范進行,保證源頭安全大約可解決80%以上的問題。 第二階段——關(guān)注波動。當(dāng)業(yè)務(wù)越來越依賴于數(shù)據(jù)的準(zhǔn)確性和實質(zhì)性時,需要整個數(shù)據(jù)團隊及時監(jiān)控數(shù)據(jù)質(zhì)量的變化,避免發(fā)生線上故障從而影響業(yè)務(wù)。 第三階段——全面掌控。當(dāng)業(yè)務(wù)越來越復(fù)雜、數(shù)據(jù)源越來越多,且各種運營動作對數(shù)據(jù)依賴程度較高時,需要整個業(yè)務(wù)團隊和數(shù)據(jù)團隊一起來關(guān)注數(shù)據(jù)質(zhì)量。 神策針對特定的市場需求,推出了神策數(shù)據(jù)治理平臺SDG,堅持以產(chǎn)品化的方式解決問題。 從日常統(tǒng)計結(jié)果可知,ID-Mapping相關(guān)問題的耗時可以占到一個數(shù)據(jù)處理項目的30%左右。早期,神策數(shù)據(jù)在ID-Mapping方面只支持一對一的映射,相當(dāng)于一個注冊ID只能跟一臺設(shè)備ID進行關(guān)聯(lián)。后來,神策數(shù)據(jù)可以支持一對多的ID-Mapping,即一個注冊ID可以和多個設(shè)備ID進行關(guān)聯(lián),但需要離線地回溯修改歷史數(shù)據(jù)。如今,神策數(shù)據(jù)已支持實時且一對多的ID-Mapping。 3.數(shù)據(jù)存儲與查詢 神策數(shù)據(jù)倉庫,是團隊基于業(yè)務(wù)進行的全新技術(shù)抽象。隨著產(chǎn)品應(yīng)用組件越來越多,團隊將存儲、查詢、計算等會復(fù)用的抽象的數(shù)據(jù)處理能力組成了一個全新的技術(shù)組件,剝離了數(shù)據(jù)倉庫層與數(shù)據(jù)應(yīng)用層,將其稱之為神策數(shù)據(jù)倉庫(Sensors Data Warehouse),包含模型層、實現(xiàn)層、接口層三大層面。通過神策數(shù)據(jù)倉庫,一方面,團隊的應(yīng)用開發(fā)變得更加簡單,只需解決數(shù)據(jù)應(yīng)用方面的問題,而無需考慮數(shù)據(jù)處理能力等方面的問題。另一方面,也嘗試將神策數(shù)據(jù)倉庫作為單獨的產(chǎn)品組件對外開放。當(dāng)然,神策數(shù)據(jù)倉庫也不僅處理用戶行為數(shù)據(jù),不僅局限在支持Event-User-Item模型上,而是進一步擴展數(shù)據(jù)模型和處理的數(shù)據(jù)類型。 過去5年,神策持續(xù)優(yōu)化存儲與查詢性能,從存儲優(yōu)化、查詢執(zhí)行優(yōu)化、查詢調(diào)度優(yōu)化三方面的迭代優(yōu)化出發(fā),力爭給用戶帶來更好的使用體驗,降低客戶的硬件使用成本。 4.數(shù)據(jù)智能引擎 數(shù)據(jù)根基的另一個重要組成部分則是神策智能引擎。早期,神策團隊更多強調(diào)個性化推薦產(chǎn)品,但其實在個性化推薦產(chǎn)品之外,智能引擎也在分析和營銷等領(lǐng)域發(fā)揮著重要價值,無論是基于數(shù)據(jù)做決策,還是基于決策做出更好的經(jīng)營和營銷動作,算法與數(shù)據(jù)智能都有其用武之地。目前,在包括預(yù)測、預(yù)警、LookAlike個性化等方面,神策整個算法團隊已在很多不同的功能組件中嘗試去探索算法的作用。神策的產(chǎn)品功能也逐漸開始與智能引擎進行結(jié)合,希望能夠完成從“人用數(shù)據(jù)”到“人機算法”的轉(zhuǎn)變。 5.神策私有云平臺 神策私有云平臺方向是神策的核心競爭力之一。神策一直秉承著“做最正確的事情,而不做簡單的事情”的理念,當(dāng)神策選擇既堅持私有化部署,又可以按照SaaS模式進行升級時,從某種意義上而言,是選擇了最難的一條路。但通過在這一方向上的持續(xù)努力,目前已經(jīng)具備了在多場景、多部署、多環(huán)境下,超過1000個不同集群的運維能力。 神策私有云平臺的技術(shù)方向,其實也是神策企業(yè)文化中“用機器替代人力”的一個絕佳案例,神策一直希望能夠在不過分增加運維人力的情況下,可支持5倍至10倍的多重部署方案、支持客戶環(huán)境的自動化安裝升級以及運維。神策私有云平臺是神策最重要的技術(shù)方向之一,它的發(fā)展結(jié)果如何,甚至可以直接影響目前的商業(yè)模式。
三、分析云:貼合業(yè)務(wù)場景,回歸用戶本身 神策分析云部分的核心內(nèi)容是用戶行為分析,過去一段時間,神策針對用戶行為分析做了大規(guī)模升級,除了上述提到的查詢和存儲能力優(yōu)化,還重構(gòu)了事件分析模型、留存分析模型,提高產(chǎn)品應(yīng)用性,以及提供更佳的產(chǎn)品體驗。基于對客戶需求的感知和理解,神策推出了全新LTV和A/B Testing模型。截至目前,神策數(shù)據(jù)在用戶行為分析方面已經(jīng)積累超5萬個使用者,以及14個高度抽象并且具有跨行業(yè)通用性的分析模型。同時,神策團隊推出全新的BI報表類功能組件,它將作為神策產(chǎn)品體系的整體數(shù)據(jù)可視化出口,打通各個分析功能組件和各類數(shù)據(jù),為管理者提供結(jié)論性的數(shù)據(jù)洞察力。 另外,神策團隊還圍繞用戶標(biāo)簽和畫像兩方面逐漸打磨產(chǎn)品實力,到目前為止,神策數(shù)據(jù)已提供完整的面向業(yè)務(wù)的用戶數(shù)據(jù)中臺能力,包括用戶標(biāo)簽的導(dǎo)入、生產(chǎn)、管理、導(dǎo)出和應(yīng)用,并且針對用戶標(biāo)簽本身,提供完整的標(biāo)簽分析,即用戶畫像分析相關(guān)的能力。 在產(chǎn)品實踐中,用戶標(biāo)簽作為神策整體產(chǎn)品矩陣的用戶中臺,為后續(xù)的廣告投放、自動化營銷、精細化運營等數(shù)據(jù)應(yīng)用場景提供底層支持,構(gòu)成神策自己的CDP用戶中臺。以前,神策分析在渠道方面只做到了跟蹤和標(biāo)記功能,以及據(jù)此進行不同渠道的站內(nèi)用戶行為分析,以便去衡量不同渠道帶來的用戶PV、UV、轉(zhuǎn)化率和消費能力。為了完整評估廣告ROI,需要打通廣告前后端數(shù)據(jù),從廣告平臺上獲取更多的數(shù)據(jù),并與第一方用戶行為數(shù)據(jù)整合,提供完整的廣告投放分析能力。這次,神策推出了廣告投放分析產(chǎn)品組件,希望能夠為客戶提供一站式廣告分析平臺,讓用戶告別以往通過Excel拼數(shù)據(jù)的重復(fù)勞動,在一個產(chǎn)品上可完整的看到廣告全鏈路數(shù)據(jù),更好地去優(yōu)化投放策略。 經(jīng)營數(shù)據(jù)分析是神策正在開發(fā)中的一個全新的產(chǎn)品。它跳出了用戶行為的限制,整合了如天貓、京東等第三方流量以及與企業(yè)內(nèi)部的多種第一方數(shù)據(jù),可對企業(yè)的經(jīng)營情況提供全面的數(shù)據(jù)整合能力。除全渠道的數(shù)據(jù)整合之外,經(jīng)營分析還覆蓋人、貨、場整個鏈路,并且為多角色提供可以多維度下鉆的分析能力。在此基礎(chǔ)之上,神策提供實時概覽,以幫助客戶對自己的經(jīng)營情況擁有及時準(zhǔn)確的了解。神策歡迎更多的品牌零售行業(yè)客戶共同參與打磨該款產(chǎn)品,探索如何把經(jīng)營數(shù)據(jù)和用戶行為數(shù)據(jù)結(jié)合,從而產(chǎn)生更多的價值。
四、營銷云:多渠道的一站式營銷與運營行動 神策對于營銷云或是整個數(shù)字化營銷的理解,可以用下圖來說明。 基于SDAF框架,神策提供互動與觸達、活動管理、自動化營銷三大核心板塊。 在互動與觸達版塊中,提供對于主流用戶觸達方式的對接和支持,在活動管理板塊中,提供完整的活動相關(guān)的管理能力,在自動化營銷板塊中,提供各種營銷相關(guān)的能力支持,這三個板塊共同構(gòu)成了神策的核心營銷引擎。為了讓核心營銷引擎更好地發(fā)揮作用,一方面,基于神策用戶中臺構(gòu)建客戶管理能力,另一方面,通過與合作伙伴的合作,構(gòu)建完整的活動內(nèi)容的管理能力,包括內(nèi)容創(chuàng)作工具、素材庫、模板庫等常見的能力支持。 1.APP生態(tài) “用戶流量在哪里,就應(yīng)該提供對應(yīng)的營銷和運營能力。”到目前為止,APP依然是一個重要的用戶生態(tài),針對APP,神策在智能運營方面以產(chǎn)品化的方式提供包括在線彈窗、在線標(biāo)簽服務(wù)等實時的在線服務(wù)能力,提供精細化用戶運營、欄位規(guī)則推薦、個性化智能推薦等精準(zhǔn)營銷和觸達手段。 2.微信生態(tài) 對于從線下轉(zhuǎn)向線上,或是從公域流量轉(zhuǎn)向私域流量的客戶而言,微信生態(tài)現(xiàn)在的重要性甚至比APP生態(tài)更高。正因如此,神策在過去一段時間內(nèi)投入較大的研發(fā)人力,全面補齊在微信生態(tài)中的功能布局,在公眾號、企業(yè)微信、小程序三個重要載體上,提供豐富的多樣化觸達能力。同時,神策借助在用戶行為分析、用戶標(biāo)簽等方面的已有優(yōu)勢,希望通過這些觸達能力最終生成多種多樣的微信生態(tài)玩法,幫助客戶更好地運營自己的微信生態(tài),以便完成拉新、促活、轉(zhuǎn)化。 3.A/B Testing 在神策分析2015年第一版的PRD中,其實已經(jīng)對A/B Testing的功能做過詳細描述,而今年,隨著整個產(chǎn)品理念的全新升級,在神策分析2.2版本中,迭代優(yōu)化后的A/B Testing功能全新上線。此版功能提供完整的實驗創(chuàng)建和實驗分流能力,可滿足流量分層、實驗互斥等高級實驗需求,為產(chǎn)品迭代、運營策略的優(yōu)化提供決策依據(jù),讓數(shù)據(jù)能夠真正的驅(qū)動決策,真正用數(shù)據(jù)來說話。 4.神策客景 與其他產(chǎn)品組件不同,神策客景是一個專門為企業(yè)服務(wù)行業(yè)打造的客戶全生命周期分析和運營系統(tǒng),提供了一系列客戶維度的分析和管理能力,在神策客景的幫助下,To B類企業(yè)可以更好地分析自身客戶對于自家產(chǎn)品的使用情況,從而提高續(xù)約續(xù)費率等指標(biāo)。
五、技術(shù)重構(gòu):打造更靈活、更開放、擴展性更好的平臺 所有的技術(shù)工作,本質(zhì)上都是為了打造更靈活、更開放、擴展性更好的平臺。一方面,它使神策自身的產(chǎn)品迭代和應(yīng)用開發(fā)更加容易便捷,另一方面,也使得神策客戶可以更好地使用神策團隊提供的開放能力,更好地發(fā)揮數(shù)據(jù)價值。從某種層面而言,這類工作在本質(zhì)上決定了神策的商業(yè)模式,以及神策的服務(wù)部署方式是否具有可行性。 過去5年,伴隨著業(yè)務(wù)的變化,神策的技術(shù)不斷發(fā)生著演進。早期,神策只有一個產(chǎn)品,那時,平臺化本身沒有太大的意義,隨著提出并開始踐行產(chǎn)品矩陣戰(zhàn)略,如何加快多個產(chǎn)品的開發(fā)速度、降低開發(fā)成本、充分地進行技術(shù)復(fù)用,成了重要的技術(shù)課題。如前文所述,神策將數(shù)據(jù)能力抽象成了神策數(shù)據(jù)倉庫。未來,隨著產(chǎn)品從分析開始全面走向營銷,必將面對更復(fù)雜的局面。從應(yīng)用角度而言,神策將不僅提供離線應(yīng)用,也提供在線服務(wù),而在線服務(wù)在運維層面其實會與私有化部署發(fā)生矛盾沖突,從某種意義上而言,神策需要去嘗試提供SaaS化的在線服務(wù)。從部署方式上而言,神策很可能會面臨這樣的局面:同一個客戶可能同時會具有私有化部署和SaaS化的混合部署局面,即數(shù)據(jù)本身存在本地私有化部署,但在線服務(wù)卻是SaaS化,這種異構(gòu)的部署方式,也對神策的整體技術(shù)架構(gòu)提出了更大的挑戰(zhàn),這也是神策持續(xù)加大技術(shù)投入和升級重構(gòu)的原因所在。除了解決本身的問題之外,技術(shù)重構(gòu)本身也更好地提供平臺化的能力。 從神策數(shù)據(jù)成立的第一天起,就試圖提供一個PaaS化的產(chǎn)品,在數(shù)據(jù)處理的各個環(huán)節(jié)都對客戶開放相應(yīng)的接口和能力,隨著開發(fā)的功能日益增多,不同客戶對于功能的定制化要求也越來越多。神策團隊逐漸意識到必須要在PaaS化的基礎(chǔ)之上打造自己的平臺化戰(zhàn)略,所以,神策團隊以此次技術(shù)重構(gòu)為契機,開始將神策數(shù)據(jù)倉庫之上的核心應(yīng)用能力抽象成一個個的標(biāo)準(zhǔn)功能單元,并借此為合作伙伴開發(fā)一些擴展功能單元打下基礎(chǔ)。 曹犟稱,如果用一句話來總結(jié)今天的演講,希望大家能夠完成一個觀念上的轉(zhuǎn)變——神策數(shù)據(jù)提供的不僅僅是用戶行為數(shù)據(jù)分析工具,更是全新的數(shù)字化營銷閉環(huán)解決方案,是全新的神策分析云、神策營銷云和神策大數(shù)據(jù)平臺。