17年-18年底我參與了一個資訊內(nèi)容興趣偏好標(biāo)簽的項(xiàng)目。什么是內(nèi)容興趣偏好標(biāo)簽?zāi)兀?/p>

簡單來說就是分析用戶喜歡看的文章類型，得到用戶的興趣偏好，在這樣的基礎(chǔ)上，對用戶進(jìn)行內(nèi)容的個性化推薦和push推送，來有效促進(jìn)app的活躍并拉長用戶生命周期。

這件事情簡單來說其實(shí)就是兩步走：

• 一是，給文章進(jìn)行分類，也就是我們俗稱的給文章打標(biāo)簽。
• 二是，給用戶打標(biāo)簽，也就是用戶閱讀了哪些類型的文章，相應(yīng)的就會獲取到自己的興趣偏好標(biāo)簽。比如我愛看科技類型的文章，那我便有極大的可能被打上科技的資訊標(biāo)簽。整體流程如下；

那么在實(shí)際操作中真的如此簡單嗎？看似簡單的兩個環(huán)節(jié)，究竟是如何實(shí)現(xiàn)的呢？

首先我們來聊一聊給文章進(jìn)行分類

筆者因?yàn)檫@個項(xiàng)目的原因，看了非常多競品app的文章分類，發(fā)現(xiàn)基本上趨于一致，但也有一些細(xì)節(jié)上的差異，更多的問題，在于資訊文章的分類很難窮盡，我們參考了市面上已有的分類，并結(jié)合一些資料制定了一整套內(nèi)容興趣偏好體系，在指定分類時(shí)，我們遵循MECE原則，基本達(dá)到了相互獨(dú)立完全窮盡。

接下來，我們要對文章進(jìn)行分類，我們采用了分類算法的有監(jiān)督的學(xué)習(xí)。理想情況下，流程是這樣的：

但在實(shí)際中面臨兩個問題，由于選擇了有監(jiān)督的學(xué)習(xí)，就面臨必須要提供有標(biāo)注的樣本的基礎(chǔ)。一般情況下有三種方式獲取樣本：

• 一是人工對文章進(jìn)行標(biāo)注，優(yōu)點(diǎn)是準(zhǔn)確，缺點(diǎn)是效率低，對于算法要求大量樣本的要求，成本非常高。
• 而另一種方式則是通過一些開源網(wǎng)站提供的關(guān)鍵詞進(jìn)行模型訓(xùn)練，比如可以從搜狗詞庫獲取，優(yōu)點(diǎn)是成本低，但缺點(diǎn)也很明顯，由于不同的分類體系對部分分類的理解不一致，導(dǎo)致分類并不夠準(zhǔn)確，后期需要耗費(fèi)大量的人力進(jìn)行矯正。
• 第三種方式是和一些資訊類app進(jìn)行合作，獲取他們的文章以及分類作為樣本，例如目前做的比較好的如今日頭條、uc等都是不錯的選擇。我們當(dāng)時(shí)其實(shí)都嘗試了（一把辛酸淚）。

獲取樣本以后，就是算法模型的訓(xùn)練及其檢驗(yàn)了。算法模型的訓(xùn)練原理，即通過對樣本文章進(jìn)行分詞，抽取實(shí)體，建立特征工程，將每一個特征詞作為向量，擬合出一個函數(shù)，這樣，當(dāng)有新的文章時(shí)，該文章通過分詞，并通過模型計(jì)算出結(jié)果。但模型并不是能夠有樣本一次性就能準(zhǔn)確的，模型還需要進(jìn)行測試和矯正。一般測試流程如下：

通過了測試的模型也并不是一勞永逸的，仍然可能在后期出現(xiàn)一些分類不準(zhǔn)確的問題，這可能是樣本造成的，也可能是算法模型造成的。這需要我們找出這些異常的文章及其分類，并矯正分類，再次作為訓(xùn)練樣本投喂給模型，進(jìn)行模型的矯正。一方面，我們可以對轉(zhuǎn)化率比較低的分類的文章進(jìn)行人工抽檢，確定問題是否出在算法。另外，在這里，由于每一篇文章的標(biāo)簽都被賦予了一個值，我們可以為這些值設(shè)置一個閾值，當(dāng)最高值低于某個閾值，這些文章及其標(biāo)簽將被召回，由人工進(jìn)行標(biāo)注和矯正，并在此投入樣本庫中。

文章標(biāo)簽的計(jì)算，由于文章具有多種標(biāo)簽的可能，并非一些二分類非此即彼的結(jié)果，因此我們采用的方式是，通過相似性算法，模型計(jì)算出文章的標(biāo)簽，并賦值，值越高則說明和這類標(biāo)簽越接近，并被打上相應(yīng)標(biāo)簽。

至此，文章打標(biāo)簽的部分就已經(jīng)完成了。

如何給用戶打標(biāo)簽

給用戶打標(biāo)簽的方式其實(shí)也可以包含兩種，統(tǒng)計(jì)類的打標(biāo)簽及算法類的打標(biāo)簽。

• 統(tǒng)計(jì)類相對簡單粗暴式的以用戶一段時(shí)間閱讀的文章類型作為用戶的興趣偏好。
• 而算法類則會增加更多的影響因素，包括文章閱讀的數(shù)量，閱讀的時(shí)間間隔，文章與當(dāng)前熱點(diǎn)事件的關(guān)系、用戶屬性因素等等。

前者在算法資源不足同時(shí)運(yùn)營需求量大的情況下可以先行，而后者可以在前者的基礎(chǔ)上切分一部分流量對算法模型進(jìn)行驗(yàn)證和調(diào)整，不斷優(yōu)化。

但在用第一種方式進(jìn)行時(shí)我們發(fā)現(xiàn)，用戶在一段時(shí)間內(nèi)閱讀的文章類型并不是穩(wěn)定的，大部分用戶會有一個或者幾個主要的興趣偏好，這些類型閱讀的文章篇數(shù)會更多，但同時(shí)，用戶也會或多或少的閱讀一些其他類型的文章，甚至有些用戶是看到哪里算哪里，什么都會看。

基于這樣的情況，我們需要對用戶的興趣偏好進(jìn)行排名，即通過對用戶一段時(shí)間內(nèi)每種文章類型閱讀的文章數(shù)進(jìn)行排名，并取用戶top 10的標(biāo)簽，清晰告訴運(yùn)營用戶喜歡什么類型的文章，這些類型中，用戶喜歡類型的優(yōu)先級是怎樣的，便于運(yùn)營同學(xué)進(jìn)行推送選擇。

因此，用戶的標(biāo)簽也需要更加靈活，能夠讓運(yùn)營同學(xué)基于事件發(fā)生時(shí)間及事件發(fā)生次數(shù)等權(quán)重進(jìn)行靈活組合選擇用戶群。

由于目前push推送很大一部分是由人工進(jìn)行的，從選擇文章，到選擇用戶，到文章和用戶的匹配，在正式進(jìn)行推送前一般都會進(jìn)行大批量的A/B test ，而資訊文章的類型非常多，僅一級標(biāo)簽已經(jīng)達(dá)到30+種，二級標(biāo)簽從100到幾百不等，總體的標(biāo)簽極有可能會有成千的標(biāo)簽，單靠運(yùn)營同學(xué)進(jìn)行推送，是絕對無法完成的。

因此，在運(yùn)營資源有限又無法實(shí)現(xiàn)自動化的的情況下一般運(yùn)營同學(xué)會對標(biāo)簽進(jìn)行測試，并選擇其中覆蓋用戶量大且轉(zhuǎn)化率較高的標(biāo)簽。但同時(shí)這樣的情況就會導(dǎo)致部分興趣偏好比較小眾的用戶被排除出推送的人群。

針對這樣的情況，我們?nèi)×擞脩魌op 10的二級標(biāo)簽及其對應(yīng)的一級標(biāo)簽作為用戶的一級和二級標(biāo)簽。這樣，解決了用戶覆蓋量的問題，也可以讓運(yùn)營人員集中精力對主體標(biāo)簽及人群進(jìn)行推送。

但同時(shí)，另一個問題又出現(xiàn)了，選擇用戶一段時(shí)間內(nèi)的行為，那么這個一段時(shí)間究竟是多長會更加合適，使得既達(dá)到能充分反應(yīng)用戶興趣，同時(shí)又覆蓋到更多的人群（每天都會有流失的用戶，因此時(shí)間線越長覆蓋用戶量越大，時(shí)間線越短覆蓋用戶量越少）

我們發(fā)現(xiàn)，用戶長期的興趣偏好趨于某種程度的穩(wěn)定，但短期的興趣偏好卻又反應(yīng)了用戶短期內(nèi)跟隨熱點(diǎn)的行為。因此從這個層面來看，短期可能更能滿足用戶的需求，但短期覆蓋用戶量小。在這里，始終有覆蓋量和轉(zhuǎn)化率之間永恒的矛盾。

我們的方式是，對用戶根據(jù)瀏覽時(shí)間進(jìn)行分段。賦予用戶長期興趣偏好和短期興趣偏好，并優(yōu)先短期興趣偏好，從長期興趣偏好中則將短期興趣用戶進(jìn)行排除，進(jìn)行不同的推送。而對于流失用戶，極有可能在最近3個月（資訊當(dāng)時(shí)定義流失用戶時(shí)間為3個月）沒有任何訪問記錄，針對于這樣的用戶，我們?nèi)∮脩糇詈笠淮斡杏涗浀臉?biāo)簽作為用戶標(biāo)簽，并進(jìn)行流失挽回。

至此，所有的用戶也都有了屬于自己的標(biāo)簽，而運(yùn)營同學(xué)也可以根據(jù)用戶的活躍時(shí)間以及閱讀的頻率對不同的用戶進(jìn)行不同的文章推送，真正的實(shí)現(xiàn)千人千面。

在這個問題上我們可以說是踩了不少的坑。

而第二種方式，是通過算法直接為用戶打上標(biāo)簽，除了時(shí)間和閱讀頻次，在算法模型中還可以增加更多的特征緯度，比如用戶閱讀文章距離現(xiàn)在的時(shí)間、閱讀文章的時(shí)長、評論、點(diǎn)贊等等，同時(shí)，還可以針對于熱點(diǎn)文章、熱點(diǎn)事件，降低文章的權(quán)重。

結(jié)語

當(dāng)我回首去總結(jié)這一段經(jīng)歷的時(shí)候，甚至當(dāng)讀者你跟隨我去了解這一段經(jīng)歷的時(shí)候可能會覺得其實(shí)很簡單，但是，在這一段經(jīng)歷中我們真的踩了無數(shù)的坑，尤其是我們不僅僅要去采集數(shù)據(jù)、制作標(biāo)簽，甚至還要去指導(dǎo)業(yè)務(wù)進(jìn)行投放以及問題分析，那段經(jīng)歷可以說是痛苦并快樂的——

痛苦是因?yàn)閱栴}實(shí)在太多，業(yè)務(wù)每天都在追著我問今天為什么轉(zhuǎn)化率又低了；快樂是因?yàn)槲覀冏罱K轉(zhuǎn)化率終于提高了一倍不止，甚至高于行業(yè)水平，也算是最好的回報(bào)了。

作者：糖糖是老壇酸菜女王

來源：糖糖是老壇酸菜女王