在Web開發(fā)過程中，Web端數(shù)據(jù)采集主要通過三種方式實現(xiàn)：服務器日志,、URL解析及JS回傳,。

1.服務器日志：指Web服務器軟件，例如Httpd,、Nginx,、Tomcat等自帶的日志，例如Nginx的日志等,；2.URL解析：指訪問服務器時,，將URL信息及攜帶的參數(shù)進行解析后，上傳服務器,，例如在進行數(shù)據(jù)搜索官網(wǎng)地址時,，我們可以獲得本次用戶搜索的內(nèi)容search為“iphone”；

3.JS回傳：指在Web頁面上添加的各類統(tǒng)計插件,，通過在頁面嵌入自定義的Javascript代碼來獲取用戶的訪問行為(比如鼠標懸停的位置,，點擊的事件等)，然后通過Ajax請求到后臺記錄日志,。 數(shù)據(jù)分析:埋點作為原料放在數(shù)據(jù)倉庫中,。提供渠道轉(zhuǎn)化、個性推薦等,。前端埋點方案

前端埋點-數(shù)倉庫表的開發(fā)成本：

埋點數(shù)據(jù)落到數(shù)倉后,，需要預先建立哪些表，如何做埋點數(shù)據(jù)的分層,；畢竟埋點的數(shù)據(jù)體量是非常大的,，TB級數(shù)據(jù)的存儲本身就是一個比較大的成本，再加上調(diào)度系統(tǒng),、計算資源,、運行性能等方面，就需要數(shù)倉團隊在一開始就要把數(shù)據(jù)模型提前建立好,，做好ods層到dw層,、ads層的劃分，維度和事實之間的建設(shè),；

數(shù)倉性能,，時間問題（hive）：因為埋點數(shù)據(jù)的體量問題，落表的時候,，一定會存在大量的冗余字段,，如果集群資源比較緊張，對于常規(guī)數(shù)據(jù)的統(tǒng)計,、計算都會帶來性能上的問題,；在數(shù)據(jù)團隊的架構(gòu)中,，有對外提供數(shù)據(jù)應用服務，對于數(shù)據(jù)的實時計算就有一定的要求,，什么場景下應該是T+1,，什么場景下應該是偽實時，避免數(shù)據(jù)調(diào)度任務影響前臺應用產(chǎn)出,。 有哪些前端埋點和前端監(jiān)控產(chǎn)品代碼埋點優(yōu)點傳遞多樣化自定義屬性,、自定義事件，傳遞比較豐富的數(shù)據(jù)到服務端,。

埋點本身現(xiàn)在已經(jīng)有太多的集成解決方案,，如webfunny、神策,、GIO等平臺,，但是在實踐的過程中仍然還是會碰都很多問題，給前端埋點同學分享下：埋點實踐過程中碰到的坑點,。

①埋點開發(fā)技術(shù)執(zhí)行不到位的問題絕大多數(shù)情況下我們說埋點,，一般都是說前端埋點，前端開發(fā)工程師在做埋點的時候又多是人為埋點,，在開發(fā)過程中,，會造成部分信息冗余、重復,、記錄不完整的情況存在；

②多產(chǎn)品之間的模塊差異化問題埋點不能夠只有一套標準規(guī)范,，多生態(tài)應用下,，業(yè)務繁瑣，在產(chǎn)品,、技術(shù)的架構(gòu)上有明顯的差異,，不同的產(chǎn)品、模塊,、坑位,、點擊事件的定義也可能有一定的區(qū)別，這時候可能需要根據(jù)場景劃分不同的埋點標準,；

③自定義埋點信息的鍵對設(shè)計問題往往會在埋點里面增加一個json的字段（bdata）,，在埋點的時候?qū)懭胱远x的業(yè)務信息進行場景識別，譬如活動id,、業(yè)務信息,、用戶快照的基本信息等，不同開發(fā)寫入的自定義字段格式可能會有差異,；

埋點行為數(shù)據(jù)對畫像建設(shè)的價值,。

常規(guī)的數(shù)據(jù)標簽主要是用戶當前的狀態(tài)或者行為的結(jié)果值，缺少行為過程的畫像刻畫；而埋點行為數(shù)據(jù)則可以將這部分內(nèi)容補齊,，描述用戶的行為過程,，讓運營人員可以時刻關(guān)注用戶的行為階段并給予個性化的反饋。

同時,，相較于數(shù)據(jù)的畫像,，基于埋點數(shù)據(jù)的用戶畫像更新頻率多為日，甚至可以實時更新,，動態(tài)變化屬性更強,，時效性也更高。因此,，埋點行為數(shù)據(jù)是構(gòu)建完整畫像數(shù)據(jù)的重要組成部分,，不僅豐富了用戶數(shù)據(jù)的維度，還讓畫像標簽更加數(shù)字擬人化,，更加完整地抽象出用戶信息全貌,。 可視化埋點方案適用場景業(yè)務上下文數(shù)據(jù)相對簡單，操作交互比較固定的界面,。

當我們點擊一個控件時,，要上報哪些內(nèi)容才能全的分析這個點擊行為呢？

準確的說,，一個事件的觸發(fā),，有4個因素：觸發(fā)者、觸發(fā)位置,、觸發(fā)的事件,、觸發(fā)的時間。(3)觸發(fā)的事件事件類型有瀏覽,、點擊,、曝光、懸浮,，下拉,、滾動、長按,、右鍵等等,，常用的還是瀏覽和點擊。(4)觸發(fā)的事件事件觸發(fā)的時間一般取的是客戶端時間,，也就是用戶的本地時間,，如果用戶的設(shè)備是移動端，取的就是手機時間,，如果是電腦,，取的就是電腦的時間,。

但是客戶端的時間不太準確，因為用戶可以去更改設(shè)備時間,。所以我們需要一個機制去校準客戶端時間,。一般的做法是，在上報事件時,，我們會上報事件觸發(fā)時間t1和數(shù)據(jù)發(fā)送時間t2,，服務端也會拿到一個接收數(shù)據(jù)的時間t3，如果t3-t2>60s,，則認為客戶端時間不準,，要對客戶端時間進行修正，修正后的客戶端時間是：t1+(t3-t2)為啥t3-t2>60s會認為不準,，因為數(shù)據(jù)發(fā)送到接收的時間,，一般不會超過60s。 前端監(jiān)控和前端埋點方案設(shè)計,。有效的前端埋點方案

前端監(jiān)控和前端埋點sdk,。前端埋點方案

埋點的功能作用：分析運營策略的合理性，優(yōu)化用戶體驗,，提高使用效率,。（精細營銷、場景化提示/私人助理）比如用戶去餐廳購買產(chǎn)品,，每次都需要在APP中選擇是否使用優(yōu)惠券,，但是通過埋點發(fā)現(xiàn)，全部的用戶對于該商家都是選擇的否,，那么說明該商家是從來沒有進行優(yōu)惠券的發(fā)放,，那么就可以考慮在商家版中增加一個是否讓用戶選擇優(yōu)惠券的選項，若商家沒有優(yōu)惠券,，那么用戶就可以直接跳過選擇是否使用優(yōu)惠券，從而提升用戶體驗及使用效率,，分析用戶消費行為,，分析不同渠道用戶行為差異。前端埋點方案

上海觀縱科技有限公司是我國webfunny前端監(jiān)控,，webfunny前端埋點,，全鏈路應用性能監(jiān)控，Argus-IT運維監(jiān)控專業(yè)化較早的有限責任公司之一,，公司始建于2022-11-14,，在全國各個地區(qū)建立了良好的商貿(mào)渠道和技術(shù)協(xié)作關(guān)系。公司主要提供一般項目:技術(shù)服務,、技術(shù)開發(fā),、技術(shù)咨詢,、技術(shù)交流、技術(shù)轉(zhuǎn)讓,、技術(shù)推廣;軟件開發(fā);人工智能基礎(chǔ)軟件開發(fā);人工智能應用軟件開發(fā);數(shù)據(jù)處理服務;信息技術(shù)咨詢服務;信息系統(tǒng)集成服務:信息系統(tǒng)運行維護服務;計算機系統(tǒng)服務;軟件銷售;計算機軟硬件及輔助設(shè)備批發(fā);計算機軟硬件及輔助設(shè)備零售;電子產(chǎn)品銷售;通信設(shè)備銷售;通訊設(shè)備銷售;咨詢策劃服務;市場調(diào)查(不含涉外調(diào)查);廣告制作;廣告發(fā)布;廣告設(shè)計,、代理;會議及展覽服務;貨物進出口。(除依法須經(jīng)批準的項目外,，憑營業(yè)執(zhí)照依法自主開展經(jīng)營活動) 許可項目:建筑智能化系統(tǒng)設(shè)計;建設(shè)工程施工;網(wǎng)絡(luò)文化經(jīng)營;互聯(lián)網(wǎng)信息服務,。(依法須經(jīng)批準的項目，經(jīng)相關(guān)部門批準后方可開展經(jīng)營活動,，具體經(jīng)營項目以相關(guān)部門批準文件或許可證件為準)等領(lǐng)域內(nèi)的業(yè)務,，產(chǎn)品滿意，服務可高,，能夠滿足多方位人群或公司的需要,。多年來，已經(jīng)為我國傳媒,、廣電行業(yè)生產(chǎn),、經(jīng)濟等的發(fā)展做出了重要貢獻。