騰訊angel平臺(tái)是款功能強(qiáng)大的第三代計(jì)算機(jī)；它是由騰訊大數(shù)據(jù)部門進(jìn)行研發(fā)推出，通過這款功能，用戶可以使用Scala 、Java的語言開發(fā)，來向機(jī)器學(xué)習(xí)需要的高性能分布式計(jì)算框架，并且還采用了目前比較先進(jìn)的參數(shù)服務(wù)器架構(gòu)，可快速的解決框架的擴(kuò)展問題，還對(duì)數(shù)據(jù)并行、模型并行等計(jì)算方法，就算十億級(jí)別維度的模型訓(xùn)練也可進(jìn)行支持，需要的朋友趕快這河?xùn)|下載站將騰訊angel平臺(tái)下載來使用試試吧！

軟件功能

　　1.ParameterServer 功能

　　基于 Matrix/Vector 的模型自動(dòng)切分和管理，兼顧稀疏和稠密兩種格式

　　支持對(duì) Model 進(jìn)行 Push 和 Pull 操作，可以自定義復(fù)雜的 psFunc

　　提供多種同步控制機(jī)制（BSP/SSP/ASP）

　　2. 開發(fā)運(yùn)行

　　語言支持：系統(tǒng)基于 Scala 和 Java 開發(fā)，用戶也可以自由選擇

　　部署方便：可以直接在 Yarn 社區(qū)版本中運(yùn)行，也支持本地調(diào)試模式

　　數(shù)據(jù)切分: 自動(dòng)切分讀取訓(xùn)練數(shù)據(jù)，默認(rèn)兼容了 Hadoop FS 接口

　　增量訓(xùn)練：訓(xùn)練過程中會(huì)自動(dòng) Checkpoint，而且支持加載模型后，增量訓(xùn)練

　　3.PS Service

　　只啟動(dòng) PSServer 和 PSAngent，為其他分布式計(jì)算平臺(tái)提供 PS 服務(wù)

　　基于 PS-Service，不需要修改 Spark 核心代碼，直接開發(fā) Spark-on-Angel 算法，該模式無縫支持 Breeze 數(shù)值運(yùn)算庫

　　4. 算法庫

　　集成 Logistic Regression，SVM，KMeans，LDA，MF，GBDT 等機(jī)器學(xué)習(xí)算法

　　多種優(yōu)化方法，包括 ADMM，OWLQN，LBFGS 和 GD

　　支持多種損失函數(shù)、評(píng)估指標(biāo)，包含 L1、L2 正則項(xiàng)

　　5. 算法優(yōu)化

　　LDA 采用了 F+LDA 算法用于加速采樣的速度，同時(shí)利用流式參數(shù)獲取的方法減少網(wǎng)絡(luò)參數(shù)獲取的延遲

　　GBDT 使用兩階段樹分裂算法，將部分計(jì)算轉(zhuǎn)移到 PS，減少網(wǎng)絡(luò)傳輸，提升速度

軟件特色

　　Angel還采用了SSP（Stale synchronous Parallel）、異步分布式SGD、多線程參數(shù)共享模式HogWild、網(wǎng)絡(luò)帶寬流量調(diào)度算法、計(jì)算和網(wǎng)絡(luò)請(qǐng)求流水化、參數(shù)更新索引和訓(xùn)練數(shù)據(jù)預(yù)處理方案等新技術(shù)。

　　這些技術(shù)使Angel性能大幅提高，達(dá)到常見開源系統(tǒng)Spark的數(shù)倍到數(shù)十倍，能在千萬到十億級(jí)的特征維度條件下運(yùn)行。

　　Angel自去年初在騰訊內(nèi)部上線以來，已應(yīng)用于騰訊視頻、騰訊社交廣告及用戶畫像挖掘等精準(zhǔn)推薦業(yè)務(wù)。

　　并且騰訊大數(shù)據(jù)平臺(tái)榮獲2016年的Sort benchmark全球排序競賽冠軍，98.8秒完成了100T數(shù)據(jù)排序，刷新了四項(xiàng)世界紀(jì)錄。2015年的這項(xiàng)排序時(shí)間還高達(dá)329秒。

　　Angel已經(jīng)支持了SGD、ADMM優(yōu)化算法，同時(shí)提供了一些常用的機(jī)器學(xué)習(xí)模型，現(xiàn)在開源的新增集成Logistic Regression，SVM，KMeans，LDA，MF，GBDT等機(jī)器學(xué)習(xí)算法。

使用說明

　　應(yīng)用基本指標(biāo)

　　終端設(shè)備數(shù)據(jù)

　　任一終端類型提供新增用戶(10301)、活躍用戶(10302)、啟動(dòng)次數(shù)(10303)指標(biāo)多維分析，記錄數(shù)Top100

　　用戶行為數(shù)據(jù)

　　開發(fā)支持?jǐn)?shù)據(jù)

　　任一終端類型提供錯(cuò)誤次數(shù)(10503)、錯(cuò)誤覆蓋人數(shù)(10504)指標(biāo)多維分析

常見問題

　　可以知道用戶下載和卸載應(yīng)用的情況嗎？

　　由于只有用戶觸發(fā)sdk時(shí)才會(huì)生成統(tǒng)計(jì)數(shù)據(jù)上報(bào)，所以可以統(tǒng)計(jì)下載并激活的數(shù)量，但不能統(tǒng)計(jì)單純的下載和卸載情況。

　　為什么有的渠道活躍用戶不為0，而累積用戶，安裝用戶卻為0？

　　用戶之前通過非"a" 渠道安裝了應(yīng)用，后面又通過"a" 渠道升級(jí)了應(yīng)用，就會(huì)出現(xiàn)"a" 渠道累積用戶為0，安裝用戶為0，但是活躍用戶不為0的情況；

　　如果用戶升級(jí)了應(yīng)用程序的版本，會(huì)算成新用戶嗎？

　　不會(huì)的。只有首次安裝且使用的用戶在使用當(dāng)天才會(huì)被統(tǒng)計(jì)成“新用戶”。App升級(jí)的用戶在當(dāng)天會(huì)被統(tǒng)計(jì)為“升級(jí)用戶”。兩者同時(shí)也屬于“活躍用戶”。

　　為什么有時(shí)前幾天的新增用戶/啟動(dòng)用戶等數(shù)據(jù)會(huì)有變化？

　　首先數(shù)據(jù)是以客戶端時(shí)間為準(zhǔn)，其次數(shù)據(jù)上報(bào)可能存在延遲（與發(fā)送策略和網(wǎng)絡(luò)密切相關(guān)）；騰訊移動(dòng)分析基于終端數(shù)據(jù)計(jì)算，每天會(huì)計(jì)算最近7天的數(shù)據(jù)，7天前的數(shù)據(jù)最接近實(shí)際數(shù)據(jù)； 因此前幾天的數(shù)據(jù)變化是正?，F(xiàn)象