埋點(diǎn)是數(shù)據(jù)采集中的一個(gè)統(tǒng)稱(chēng),通常也叫做事件追蹤(Event Tracking),它主要針對(duì)特定用戶(hù)行為或事件進(jìn)行捕獲、處理和發(fā)送的相關(guān)技術(shù)及其實(shí)施過(guò)程。
埋點(diǎn)是為了滿(mǎn)足快捷、高效、豐富的數(shù)據(jù)應(yīng)用而做的用戶(hù)行為過(guò)程及結(jié)果記錄。數(shù)據(jù)埋點(diǎn)是一種常用的數(shù)據(jù)采集的方法。埋點(diǎn)是數(shù)據(jù)的來(lái)源,采集的數(shù)據(jù)可以分析網(wǎng)站/APP的使用情況,用戶(hù)行為習(xí)慣等,是建立用戶(hù)畫(huà)像、用戶(hù)行為路徑等數(shù)據(jù)產(chǎn)品的基礎(chǔ),webfunny前端埋點(diǎn)是一體化輕量級(jí)埋點(diǎn)系統(tǒng)。 前端監(jiān)控和前端埋點(diǎn)sdk。前端埋點(diǎn)產(chǎn)品
什么是前端埋點(diǎn)?埋點(diǎn),它的學(xué)名是事件追蹤(EventTracking),主要是針對(duì)特定用戶(hù)行為或業(yè)務(wù)過(guò)程進(jìn)行捕獲、處理和發(fā)送的相關(guān)技術(shù)及實(shí)施過(guò)程。埋點(diǎn)是數(shù)據(jù)領(lǐng)域的一個(gè)專(zhuān)業(yè)術(shù)語(yǔ),也是互聯(lián)網(wǎng)領(lǐng)域的一個(gè)俗稱(chēng)。
埋點(diǎn)是產(chǎn)品數(shù)據(jù)分析的基礎(chǔ),一般用于推薦系統(tǒng)的反饋、用戶(hù)行為的監(jiān)控和分析、新功能或者運(yùn)營(yíng)活動(dòng)效果的統(tǒng)計(jì)分析等。
埋點(diǎn)包含兩個(gè)重要概念:事件(event),屬性(param)。
事件(event):應(yīng)用中發(fā)生了什么,例如用戶(hù)操作、系統(tǒng)事件或系統(tǒng)錯(cuò)誤。以某產(chǎn)品為例,包含以下事件:enter_page(進(jìn)入頁(yè)面)、leave_page(離開(kāi)頁(yè)面)。
屬性(param):為了描述用戶(hù)群細(xì)分而定義的屬性,例如語(yǔ)言偏好或地理位置。以“進(jìn)入課后練習(xí)”事件為例,它包含如下事件屬性:enter_from(從哪個(gè)頁(yè)面來(lái)),class_id(課程id)等。屬性值(value):屬性的維度,即行為觸發(fā)時(shí)的具體維度。例如:enter_from:home(主頁(yè))、system(系統(tǒng))等。 國(guó)內(nèi)前端埋點(diǎn)sdk方案前端埋點(diǎn)活躍用戶(hù)分析。
當(dāng)我們點(diǎn)擊一個(gè)控件時(shí),要上報(bào)哪些內(nèi)容才能全的分析這個(gè)點(diǎn)擊行為呢?
準(zhǔn)確的說(shuō),一個(gè)事件的觸發(fā),有4個(gè)因素:觸發(fā)者、觸發(fā)位置、觸發(fā)的事件、觸發(fā)的時(shí)間。(3)觸發(fā)的事件事件類(lèi)型有瀏覽、點(diǎn)擊、曝光、懸浮,下拉、滾動(dòng)、長(zhǎng)按、右鍵等等,常用的還是瀏覽和點(diǎn)擊。(4)觸發(fā)的事件事件觸發(fā)的時(shí)間一般取的是客戶(hù)端時(shí)間,也就是用戶(hù)的本地時(shí)間,如果用戶(hù)的設(shè)備是移動(dòng)端,取的就是手機(jī)時(shí)間,如果是電腦,取的就是電腦的時(shí)間。
但是客戶(hù)端的時(shí)間不太準(zhǔn)確,因?yàn)橛脩?hù)可以去更改設(shè)備時(shí)間。所以我們需要一個(gè)機(jī)制去校準(zhǔn)客戶(hù)端時(shí)間。一般的做法是,在上報(bào)事件時(shí),我們會(huì)上報(bào)事件觸發(fā)時(shí)間t1和數(shù)據(jù)發(fā)送時(shí)間t2,服務(wù)端也會(huì)拿到一個(gè)接收數(shù)據(jù)的時(shí)間t3,如果t3-t2>60s,則認(rèn)為客戶(hù)端時(shí)間不準(zhǔn),要對(duì)客戶(hù)端時(shí)間進(jìn)行修正,修正后的客戶(hù)端時(shí)間是:t1+(t3-t2)為啥t3-t2>60s會(huì)認(rèn)為不準(zhǔn),因?yàn)閿?shù)據(jù)發(fā)送到接收的時(shí)間,一般不會(huì)超過(guò)60s。
前端埋點(diǎn)-數(shù)倉(cāng)庫(kù)表的開(kāi)發(fā)成本:
埋點(diǎn)數(shù)據(jù)落到數(shù)倉(cāng)后,需要預(yù)先建立哪些表,如何做埋點(diǎn)數(shù)據(jù)的分層;畢竟埋點(diǎn)的數(shù)據(jù)體量是非常大的,TB級(jí)數(shù)據(jù)的存儲(chǔ)本身就是一個(gè)比較大的成本,再加上調(diào)度系統(tǒng)、計(jì)算資源、運(yùn)行性能等方面,就需要數(shù)倉(cāng)團(tuán)隊(duì)在一開(kāi)始就要把數(shù)據(jù)模型提前建立好,做好ods層到dw層、ads層的劃分,維度和事實(shí)之間的建設(shè);
數(shù)倉(cāng)性能,時(shí)間問(wèn)題(hive):因?yàn)槁顸c(diǎn)數(shù)據(jù)的體量問(wèn)題,落表的時(shí)候,一定會(huì)存在大量的冗余字段,如果集群資源比較緊張,對(duì)于常規(guī)數(shù)據(jù)的統(tǒng)計(jì)、計(jì)算都會(huì)帶來(lái)性能上的問(wèn)題;在數(shù)據(jù)團(tuán)隊(duì)的架構(gòu)中,有對(duì)外提供數(shù)據(jù)應(yīng)用服務(wù),對(duì)于數(shù)據(jù)的實(shí)時(shí)計(jì)算就有一定的要求,什么場(chǎng)景下應(yīng)該是T+1,什么場(chǎng)景下應(yīng)該是偽實(shí)時(shí),避免數(shù)據(jù)調(diào)度任務(wù)影響前臺(tái)應(yīng)用產(chǎn)出。 頁(yè)面停留埋點(diǎn)事件主要是記錄前一頁(yè)瀏覽時(shí)間。
無(wú)埋點(diǎn)又叫全埋點(diǎn),無(wú)埋點(diǎn)不是不需要埋點(diǎn),而是全部埋點(diǎn),前端的任何事件都被綁定上一個(gè)標(biāo)識(shí),所有的事情都被記錄下來(lái),只是不需要工程師在業(yè)務(wù)代碼里面插入侵入式的代碼。通過(guò)定期上傳記錄文件,配合文件解析,解析出我們需要的數(shù)據(jù)并生成可視化報(bào)告供專(zhuān)業(yè)人員分析。
無(wú)埋點(diǎn)技術(shù)的關(guān)鍵是:操作可視化配置工具,保存配置,SDK基礎(chǔ)代碼如何根據(jù)配置上報(bào)行為。
無(wú)埋點(diǎn)的優(yōu)點(diǎn):由于采集的是全量數(shù)據(jù),所以產(chǎn)品迭代過(guò)程中是不需要關(guān)注埋點(diǎn)邏輯的,也不會(huì)出現(xiàn)漏埋、誤埋等現(xiàn)象無(wú)埋點(diǎn)的缺點(diǎn):無(wú)埋點(diǎn)采集全量數(shù)據(jù),給數(shù)據(jù)傳輸和服務(wù)器增加壓力無(wú)法靈活的定制各個(gè)事件所需要上傳的數(shù)據(jù) 埋點(diǎn)是為了滿(mǎn)足快捷、高效、豐富的數(shù)據(jù)應(yīng)用而做的用戶(hù)行為過(guò)程及結(jié)果記錄。從零開(kāi)始搭建前端埋點(diǎn)框架產(chǎn)品
數(shù)據(jù)分析:埋點(diǎn)作為原料放在數(shù)據(jù)倉(cāng)庫(kù)中。提供渠道轉(zhuǎn)化、個(gè)性推薦等。前端埋點(diǎn)產(chǎn)品
代碼埋點(diǎn)的實(shí)現(xiàn)原理比較簡(jiǎn)單,主要是初始化 SDK 之后,在某個(gè)事件發(fā)生時(shí)調(diào)用 - track: 或 - track:withProperties: 等相關(guān)接口,將觸發(fā)的事件和屬性保存到數(shù)據(jù)模型中(SDK 中使用的是 NSDictionary 類(lèi)型的數(shù)據(jù)模型)。
并將數(shù)據(jù)模型轉(zhuǎn)化為 JSON 串,存儲(chǔ)到本地?cái)?shù)據(jù)庫(kù)中。然后,按照發(fā)送策略將數(shù)據(jù)發(fā)送到指定的服務(wù)端。例如:我們想統(tǒng)計(jì) App 里面某個(gè)按鈕的點(diǎn)擊次數(shù),可以在這個(gè)按鈕對(duì)應(yīng)的點(diǎn)擊方法里面調(diào)用 SDK 提供的接口來(lái)采集事件。
webfunny前端埋點(diǎn)系統(tǒng)采用了代碼埋點(diǎn)方案、集數(shù)據(jù)集采+分析一體化輕量級(jí)系統(tǒng)。 前端埋點(diǎn)產(chǎn)品
上海觀縱科技有限公司致力于傳媒、廣電,是一家服務(wù)型的公司。觀縱科技致力于為客戶(hù)提供良好的webfunny前端監(jiān)控,webfunny前端埋點(diǎn),全鏈路應(yīng)用性能監(jiān)控,Argus-IT運(yùn)維監(jiān)控,一切以用戶(hù)需求為中心,深受廣大客戶(hù)的歡迎。公司秉持誠(chéng)信為本的經(jīng)營(yíng)理念,在傳媒、廣電深耕多年,以技術(shù)為先導(dǎo),以自主產(chǎn)品為重點(diǎn),發(fā)揮人才優(yōu)勢(shì),打造傳媒、廣電良好品牌。觀縱科技憑借創(chuàng)新的產(chǎn)品、專(zhuān)業(yè)的服務(wù)、眾多的成功案例積累起來(lái)的聲譽(yù)和口碑,讓企業(yè)發(fā)展再上新高。