專訪 KKTV 資料競賽團隊:辦比賽,得像新創公司一樣經營!

不過是辦個資料探勘競賽,有必要這麼認真,這麼花功夫嗎?KKTV 的經驗告訴你,真的很值得!
評論
評論

無論發起方規模大小,只要有好題目、好資料與好解法,資料探勘競賽不僅是工程師與駭客們彼此切戳的絕佳場景,也一直都是充滿活力,十分受用的創新途徑。但對一間企業而言,資料探勘競賽到底怎麼深化到組織內部,成為更深層也更有趣的創新動能呢?單單今年就一連舉辦四次,把「辦比賽」當作新創公司在經營的 KKTV、KKStream 或許就是好例子。

我們這次專訪到資深技術總監官順暉、資料科學家羅經凱、工程師莊鐵鴻與專案副理徐小涵,來談談 KKTV 怎藉由縝密的專案執行,讓資料競賽不只發揮了開發功能,甚至還進一步成為提升團隊全體技術水準的最佳媒介。

辦比賽就是在辦新創

「團隊雖然小,但我們完全把整回事(資料探勘競賽)當作在營運一間公司。」官順暉在訪談剛開始,就把成員列舉成新創公司的各主管一一介紹:他自己負責目標設定、資源調配與對外溝通,顯然是 CEO 的角色;怎麼籌劃整件事進行則是資料科學家羅經凱博士的工作,是 COO。

辦比賽有很多細節,像資料怎麼整理?比賽題目怎麼訂?要設定什麼環境?那就是由精通機器學習的 CTO 莊鐵鴻跟羅經凱一起討論了。最後 KKTV 那麼大,那該怎麼使資料競賽都能讓每位同事都能一起參與進來?所以就有了負責「行銷」的 CMO 徐小涵。

你或許看到這裡就會想問了:不過是辦個資料探勘競賽,有必要這麼煞有其事,這麼花功夫嗎?官順暉倒反過來說明:「單單只用舉辦一場『活動』,就讓(包括非技術職)同事們資料怎麼使用,甚至讓大家積極參與,這件事沒那麼容易。」從此不難窺見:像 KKTV 乃至 KKBOX 集團這種大型組織,若要真有效集合全體能量,就算是這種「有趣」的活動,縝密規劃仍不可少。

不只獲得開發成果,同仁技術水平也有顯著提升

那 KKTV 究竟是為了什麼舉辦資料探勘競賽呢?羅經凱說明原因分一遠程,一近端。放遠來看,KKTV 與 KKStream 畢竟是網路科技公司,同仁們也都知道「資料分析」是最重要也是最熱門的技術趨勢,但該怎麼落實到每位同仁手上?舉辦比賽就成了最有趣的路徑之一,而另一個近端原因就是 KKTV 想快速開發精準有效的推薦系統。

▲KKTV 資料科學家羅經凱博士之前在 KKBOX 就有豐富的資料分析經驗

因此他們在第一次、第二次競賽在 Kaggle 上釋出去識別化,連續三個月的使用者觀影資訊,其中包括觀看的時間點、時長,以及使用者所在的地區、國家,以及他們看的劇名、劇種;題目就是「推坑好劇,由你決定」,要從七百多部劇中,去猜七萬名使用者每個人下個月所看的劇。有點意外的是,第一次對內比賽居然是由懂機器學習,用 Random Forests 的在學生獲得冠軍,擊敗了眾多工程師。

莊鐵鴻補充第一次比賽有一隊由三位不會寫程式的 PM 所組成,居然用 EXCEL 也拿下了不錯成績!只可惜 EXCEL 算力終究有限,但這無疑為官順暉、羅經凱、莊鐵鴻等人感到窩心,讓他們覺得在公司舉辦資料競賽的方向確實可行。歷經了兩次競賽,KKTV 後來真依照其結果在七月實裝了頗為有效的推薦系統。

第三、第四次則是加入了「時間點」要素,一口氣釋出了上千萬筆去識別化的使用者資料,其中不只有從註冊至今的觀影行為,就連是用哪隻手機、桌機還是平板,甚至是用 Wi-Fi 還是 4G 都含括在內,請參賽者根據過去行為,推算使用者在未來一週內的看劇時段;往後運用在 KKTV 上,就是做出精準有效率的推播系統。在第四次最終公開賽,前三名 Leader board 成績幾乎達到了 0.893(也就是命中率 89.3%)之水準。

▲KKTV 後來真依資料競賽結果,七月實裝了頗為有效的推薦系統

機器學習如何在探勘競賽中發威?舉辦方又該怎麼整理資料?

莊鐵鴻分享了一個小插曲:在第三次比賽中,KKTV 內部有個團隊堅持用各種先期假設的演算法挑戰機器學習,但後來果然成績不敵機器學習的團隊,比賽後一轉態度,認真研究機器學習去了。「經過這次我們更深刻理解:現在很多事情已經無法靠 Domain Knowledge 解決,大家必須積極擁抱機器學習的時候到了。」像第一、第三名採用了 Gradient Boosting,第二名也就是莊鐵鴻自己則是用 CNN 卷積神經網路。

而第四次公開賽甚至吸引了來自趨勢、富士康、微軟等知名 IT 公司的高手參加,甚至有位大學教授在 Kaggle 只用十次解答,在最後一刻獲得了第三名。

談到資料探勘競賽,就不得不談談「資料品質」的話題。莊鐵鴻認為準備資料最重要的環節就在於這些資料到底能不能與問題的邏輯相符,然後再將其清乾淨並去識別化。官順暉補充 2007 年 Netflix 也辦過一次資料比賽,但去識別化後的資料竟然被參賽者反推成功,從此成為舉辦競賽的一次反例。所以提供給參賽者的資料不僅理所當然得把敏感個資去掉,就連使用者與影片的 ID 都要以亂數重新遮蓋,觀看時間也是整段平移了。

那明年 KKTV 還要繼續辦嗎?官順暉與羅經凱回答:當然要囉!事實上他們很享受跟資料高手過招、交流的過程,徐小涵也表示明年想擴大事後交流規模,成為資料圈中類似於創業小聚的常態性活動。「題目方面我們也不缺啦,資料能做的事太多了」羅經凱笑稱,接下來想湊合學界與業界做成 Workshop 的形式,讓台灣資料科學的大家都能正向成長。


精準媒合,成為企業 100% 留用的 5G 新星

「大家最為關心的,就是人才缺口」經濟部工業局呂正華局長點出產業問題缺口,與資策會教研所、學界攜手合作,自去年起,已超過 600 名新星參與 5G 產業媒合。
評論
經濟部工業局呂正華局長洞察產業痛點,積極培養新興人才。 Photo Credit: 5G+ 產業新星揚帆啟航計畫團隊
評論

「大家最為關心的,就是人才缺口」經濟部工業局呂正華局長點出產業問題缺口,與資策會教研所、學界攜手合作,自去年起,已超過 600 名新星參與 5G 產業媒合。


第一次工業革命催生了現今的製造業,而 5G 將驅動世界又一次進化。 5G 網路具備超大頻寬、海量連結、超低延遲等特性,網速比 4G 快 10 倍以上,透過專網覆蓋,能承載各種需要龐大資料流量的智慧化服務,讓過去只存在於科幻小說中的場景有望逐一實現。

根據全球行動通信協會( GSMA )統計,至今( 2021 )年 6 月已有 69 個國家、 166 家電信廠商推出 5G 服務,顯見各國都強力聚焦發展 5G 通訊科技,預計 2025 年可達 18 億用戶規模。臺灣也於去年 2 月完成國內首波 5G 頻段競標,各大電信業者積極建設基地台,不落於美、日、韓等國之後。

雖然在疫情肆虐下不免打亂既有布局,但正因我們的食衣住行育樂都被迫數位化,反而讓 5G 在數位醫療、虛擬娛樂、擴增實境、加密裝置等跨領域的應用,因為需求而產生更多可能性。企業趁疫情之際加強練兵,加快轉型升級腳步,也需要更多新血加入。

首重跨領域 企業樂於從頭培養人才

經濟部工業局長呂正華表示,臺灣資通訊產業發展成熟,政府也全力扶植,「大家最為關心的,就是缺人才」。儘管商機潛力無窮,許多致力於商品化的企業都還是頻喊找不到人。

為此,工業局去年開始推動「 5G+ 產業新星揚帆啟航計畫」(以下簡稱 5G+  新星計畫),以「產業出題,人才實戰」模式媒合產學研發,目前已收穫相當成果;兩屆推動下來,已有上百家企業及大專校院參與,超過 600 名學生及應屆畢業生參與企業實戰活動。

呂正華說明,「產業出題,人才實戰」的專題都是企業在 5G 商用研發過程中實際遇到的問題,讓學生挑戰解題,為企業發展真正可用的解決方案,進而協助企業從內部「做中學」( OJT )培養切合需求的即戰力,目前參與計畫的企業對於學生留用意願達 100% ;因此「精準媒合,不管是對企業、對人才都能少掉很多碰撞和磨合,節省徵才和求職的成本。」

計畫不僅媒合企業資源,更辦理實戰工作坊,強化數位職能。Photo Credit:  5G+產業新星揚帆啟航計畫團隊
計畫不僅媒合企業資源,更辦理實戰工作坊,強化 5G 職能。Photo Credit:  5G+產業新星揚帆啟航計畫團隊

此外,呂正華也表示,因為 5G 應用是電機、機械、光電、材料等不同領域的結合,極需要跨領域的人才,企業很願意從頭培養,「所以態度比科系更重要」。

呂正華舉例,由交大資工系衍生之研發服務公司詮隼科技,曾面臨年薪 150 萬的職缺無人應徵的窘境,去年加入計畫,成功從內部培養出好幾位優秀人才,其中一位是中興大學中文系畢業的黃予璿,黃同學善用跨領域思考能力,在公司開發資安自動測試服務方面貢獻良多,文組與理組看似交集不多,可是只要有興趣,人人都能從 5G 行業中找到適合自己的工作。

電子五哥之一的仁寶電腦近年積極進行數位轉型,成立 5G 實驗室,鎖定智慧農業、智慧製造、健康醫療、雲端遊戲和終端設備等應用領域,並在去年透過 5G+ 新星計畫成功招募 19 位新血,藉由計畫的加值,培育人才並同步發展 5G 商業應用。

其中臺北教育大學玩具與遊戲設計所的研究生王凱瀚,過去從沒想過自己能加入科技業大公司,藉由計畫才有機會參與仁寶電腦的研發實戰。期間投入「 5G 邊緣運算技術智慧遊戲應用平台」研究,融合本身在數位內容和網頁設計的專業,進行雲端遊戲、虛擬實境解決方案與工具包的開發,最後獲得研發專題冠軍殊榮。

業師、培訓課程系統性帶領,加入 5G 創新研發

同時,「企業常反映學生在學校學的知識實際上沒辦法用,所以我們開的課要符合企業實戰需求。」呂正華說明, 5G+ 新星計畫也提供系統性的線上課程,特別引進諾基亞貝爾實驗室(Nokia Bell Labs)等 5G 專業培訓課程,並規劃包括天線、射頻、晶片封測、關鍵材料、小基站/無線接取、 SDN/ NFV(軟體定義網路/網路虛擬化)等 6 大領域職能地圖。仁寶電腦、雲達科技、亞旭電腦等企業都將其納入內部教育訓練規劃,也採用 5G JUMP 的線上課程強化員工 5G 職能。

計畫也與交大產業加速器( IAPS )、臺科大育成中心等機構合作培育創新應用師資,以帶領新創公司加速 5G 應用服務的開發,目前已成功培育 23 名業師顧問並輔導 12 組新創團隊,更有 2 家新創公司從去年接受輔導的角色,到今年成功商轉並擔任計畫的出題企業,形成正向循環。

呂正華說,5G 跨域應用是非走不可的路,臺灣已擁有完整 5G 生態系的基礎能量,涵蓋半導體、電子零組件、伺服器、網通與終端設備等產業,馬步紮得穩、紮得深,可在國際競爭中站穩腳步。 5G 新星計畫將作為產學培育人才的溝通橋樑,期待未來培養出更多生力軍,加速臺灣邁入 5G 紀元的步伐。

經濟部工業局 廣告