近日，短視頻APP成為眾矢之的。因相關(guān)短視頻內(nèi)容涉未成年人低俗不良信息，國(guó)家網(wǎng)信辦相繼約談了快手和今日頭條旗下火山小視頻相關(guān)負(fù)責(zé)人，提出嚴(yán)肅批評(píng)并責(zé)令全面整改。之后，微信、QQ也將在互聯(lián)網(wǎng)短視頻整治期間暫停短視頻APP外鏈直接播放功能，涉及的APP包括微視、快手、抖音、西瓜視頻等。

新媒體時(shí)代，用戶每天生產(chǎn)的內(nèi)容都在爆發(fā)式增長(zhǎng)，在這些新生產(chǎn)的內(nèi)容里通常存在著大量的不良內(nèi)容，會(huì)使得用戶產(chǎn)生反感，甚至觸犯法律，這時(shí)就需要對(duì)這些新生產(chǎn)的內(nèi)容進(jìn)行審核，而傳統(tǒng)的人工審核方式已經(jīng)跟不上爆發(fā)式增長(zhǎng)的內(nèi)容量，人工智能時(shí)代，如何做好內(nèi)容開(kāi)放平臺(tái)建設(shè)成為業(yè)內(nèi)人士關(guān)注的熱點(diǎn)。

4月21日，由DataFun、數(shù)據(jù)猿聯(lián)合微軟加速器主辦的主題為“人工智能時(shí)代：內(nèi)容審核與流量反作弊”活動(dòng)在微軟亞太研發(fā)集團(tuán)總部舉行。本期活動(dòng)邀請(qǐng)了曾參與、負(fù)責(zé)360等多家公司內(nèi)容開(kāi)放平臺(tái)建設(shè)的資深算法研發(fā)工程師劉路、愛(ài)奇藝流量反作弊項(xiàng)目負(fù)責(zé)人張曉明和數(shù)美科技聯(lián)合創(chuàng)始人&CTO梁堃從內(nèi)容、流量等方面分享了人工智能時(shí)代，平臺(tái)的內(nèi)容審核與流量反作弊是如何完成的。

當(dāng)下，內(nèi)容開(kāi)放平臺(tái)有三種類型：用戶生產(chǎn)內(nèi)容、專業(yè)生產(chǎn)內(nèi)容和職業(yè)生產(chǎn)內(nèi)容。大眾點(diǎn)評(píng)、地圖屬于典型的用戶生產(chǎn)內(nèi)容；豆瓣、知乎屬于典型的專業(yè)生產(chǎn)內(nèi)容；微信公眾號(hào)、抖音屬于職業(yè)生產(chǎn)內(nèi)容。內(nèi)容開(kāi)放平臺(tái)的強(qiáng)社交性、強(qiáng)隨機(jī)性和強(qiáng)運(yùn)營(yíng)性帶來(lái)的主要問(wèn)題和矛盾為廣告主和消費(fèi)者之間的矛盾，內(nèi)容質(zhì)量和內(nèi)容之間的矛盾以及流量和質(zhì)量之間的矛盾。

劉路 資深算法研發(fā)工程師

劉路認(rèn)為建設(shè)一個(gè)行之有效的信用體系是內(nèi)容開(kāi)放平臺(tái)解決這些矛盾的關(guān)鍵。一個(gè)常規(guī)的信用體系建設(shè)架構(gòu)涉及到內(nèi)容生產(chǎn)者和用戶。內(nèi)容生產(chǎn)者提交了內(nèi)容之后去做個(gè)人信用和內(nèi)容審核，審核需要利用大數(shù)據(jù)風(fēng)控和信用評(píng)級(jí)功能，如果審核不通過(guò)內(nèi)容生產(chǎn)者需要進(jìn)行申訴，兩方面審核均通過(guò)則可發(fā)布內(nèi)容，之后可進(jìn)行AB測(cè)試和分級(jí)發(fā)布，而內(nèi)容發(fā)布之后需要進(jìn)行風(fēng)險(xiǎn)評(píng)估，從而判斷該內(nèi)容是否需要召回，并設(shè)置相應(yīng)的召回策略。

劉路特別指出，在內(nèi)容方面需要設(shè)置層層關(guān)卡，低信用內(nèi)容需要被內(nèi)容信任監(jiān)控，高信用內(nèi)容則需設(shè)置內(nèi)容被舉報(bào)監(jiān)控，從而最大程度地清除內(nèi)容開(kāi)放平臺(tái)的不合規(guī)內(nèi)容。

當(dāng)下，視頻網(wǎng)站已經(jīng)形成一條灰色產(chǎn)業(yè)鏈，一些視頻平臺(tái)默認(rèn)刷量行為，廣告展現(xiàn)量中超過(guò)20%是虛假的。同時(shí)，刷量的流程已經(jīng)高度程序化，業(yè)界缺乏合理的監(jiān)管。而對(duì)于廣告主，流量造假與欺詐行為無(wú)異。如今，各大視頻網(wǎng)站發(fā)展十分迅速，如何在用戶量較大的情況下，做好流量反作弊？愛(ài)奇藝流量反作弊項(xiàng)目負(fù)責(zé)人張曉明分享了愛(ài)奇藝流量反作弊的“術(shù)”與“道”。

張曉明 愛(ài)奇藝流量反作弊項(xiàng)目負(fù)責(zé)人 研究員

在業(yè)界，對(duì)于流量反作弊并沒(méi)有統(tǒng)一的定義，在張曉明看來(lái)流量反作弊是制造非用戶產(chǎn)生或帶有一定目的性的數(shù)據(jù)，并且有機(jī)器作弊和人工作弊兩種形式。其中機(jī)器作弊包括模仿投遞日志、調(diào)用接口，這種形式設(shè)定模式相對(duì)固定，短期效果明顯；人工作弊則包括微信群、QQ群以及由專人指導(dǎo)的專業(yè)APP，指導(dǎo)操作并與用戶分成，這種模式不固定，效果與組織規(guī)模有關(guān)。

利用這兩模式進(jìn)行直播刷人氣、網(wǎng)站刷廣告、電視劇和商品刷流量，會(huì)使得正常用戶對(duì)產(chǎn)品的判定標(biāo)準(zhǔn)失衡、企業(yè)信譽(yù)受損、數(shù)據(jù)分析不準(zhǔn)確和成本上升等多種傷害。

在張曉明看來(lái)，流量反作弊具有被動(dòng)防守、事后分析，業(yè)務(wù)場(chǎng)景復(fù)雜、沒(méi)有通用模型，持續(xù)舊規(guī)則不斷更新新規(guī)則等特點(diǎn)，如何進(jìn)行有效地流量反作弊？基于以往的業(yè)務(wù)經(jīng)驗(yàn)，張曉明表示，進(jìn)行行之有效的流量反作弊需要做好前期的準(zhǔn)備工作：掌握投遞日志或者數(shù)據(jù)庫(kù)中的元數(shù)據(jù)含義，掌握主體業(yè)務(wù)的工作模式和場(chǎng)景，避免信息孤島，了解作弊的目的是什么以及與業(yè)務(wù)部門(mén)進(jìn)行良好的溝通確認(rèn)作弊的口徑并做好保密工作。準(zhǔn)備工作完成之后，在技術(shù)方面進(jìn)行IP信譽(yù)、安全畫(huà)像、加密信息檢測(cè)和設(shè)備硬件信息檢測(cè)；在業(yè)務(wù)方面進(jìn)行規(guī)則統(tǒng)計(jì)和機(jī)器學(xué)習(xí)。

隨著移動(dòng)互聯(lián)網(wǎng)的發(fā)展，人們的衣、食、住、行各個(gè)方面都結(jié)合在了一起，這給黑色產(chǎn)業(yè)帶來(lái)了很大的盈利空間。在金融領(lǐng)域有借貸欺詐、盜卡交易、洗錢(qián)套現(xiàn)等模式；在電商行業(yè)有刷榜、促銷活動(dòng)欺詐等形式；在游戲方面有黑卡、掛機(jī)等現(xiàn)象；在社交方面有淫穢色情發(fā)帖、欺詐廣告等現(xiàn)象。

梁 堃 ?數(shù)美科技 聯(lián)合創(chuàng)始人&CTO

梁堃表示，面對(duì)這些欺詐行為企業(yè)采取了相應(yīng)的措施，但多數(shù)企業(yè)缺乏全局的風(fēng)險(xiǎn)數(shù)據(jù)支撐和專業(yè)的反欺詐人才團(tuán)隊(duì)，隨著UGC內(nèi)容的內(nèi)在復(fù)雜性越來(lái)越高，黑產(chǎn)技術(shù)水平與專業(yè)程度的不斷提高，企業(yè)面臨的挑戰(zhàn)越來(lái)越多。

當(dāng)天，基于以往的經(jīng)驗(yàn)梁堃分享了在內(nèi)容反欺詐方面的一些經(jīng)驗(yàn)。他表示，UGC場(chǎng)景包括頭像、昵稱、發(fā)帖、彈幕、評(píng)論、個(gè)人描述、私信、群聊等，UGC帶來(lái)的問(wèn)題：詐騙、廣告、色情、暴恐等文本、圖片、語(yǔ)音UGC內(nèi)容。同一個(gè)內(nèi)容在不同的場(chǎng)景下含義不同，單一的關(guān)鍵字黑名單或單一模型極易造成大量誤殺，影響用戶體驗(yàn)，使用深度學(xué)習(xí)（RNN）、SVC善NLP技術(shù)針對(duì)語(yǔ)意理解的不同方面分別建立不同的模型，從多個(gè)緯度檢測(cè)語(yǔ)意環(huán)境。采用Char & Word Embedding自動(dòng)識(shí)別數(shù)萬(wàn)種敏感詞變體、微信／QQ／手機(jī)號(hào)等聯(lián)系方式變體，采用基于CRF的序列標(biāo)注自動(dòng)識(shí)別并排除干擾。

如今，騙子們分工明確，形成了龐大的黑色產(chǎn)業(yè)鏈。隨著人工智能時(shí)代的到來(lái)，通過(guò)大數(shù)據(jù)、機(jī)器學(xué)習(xí)等技術(shù)勢(shì)必將打擊黑產(chǎn)進(jìn)行到底。