用ai算法預(yù)測空氣質(zhì)量

作為數(shù)據(jù)挖掘領(lǐng)域比較有影響力的賽事，kdd cup比賽由acm協(xié)會的國際會議sigkdd舉辦，自1997年以來每年舉辦一次。該比賽一直以來都強(qiáng)調(diào)在實際場景中的應(yīng)用性，今年的賽題是主辦方提供中國北京和英國倫敦的天氣數(shù)據(jù)，比賽選手需要以此來預(yù)測未來48小時內(nèi)pm2.5\pm10\o3濃度，賽題本身對應(yīng)對惡劣環(huán)境、改善人類生存有著重要意義。 track”、“比較后10天專項獎”、“比較佳長期預(yù)測獎”，從三個維度來獎勵比賽中表現(xiàn)突出的隊伍。而“getmax”也因全面而突出的表現(xiàn)，從4000多個參賽隊伍中脫穎而出，成為唯*一個斬獲三項大獎的隊伍，分別取得一項亞軍、兩項的成績。 2012 產(chǎn)出的xgboost和ffm模型對工業(yè)界產(chǎn)生了很大的推進(jìn)作用，而在工業(yè)界有了一定應(yīng)用沉淀后，又不斷地對這兩種模型進(jìn)行優(yōu)化。 習(xí)相關(guān)算法進(jìn)行建模與優(yōu)化。在算法比賽中一方面將工作中熟悉的技術(shù)應(yīng)用于各種實際問題，另一方面則加深對技術(shù)的理解并且將新的理解應(yīng)用到未來工作中。 tech的品牌戰(zhàn)略，在其原有業(yè)務(wù)的探索基礎(chǔ)上，加深與學(xué)術(shù)界的交流，阿里媽媽每年都有一些新論文入選到ijcai、www、aaai等技術(shù)領(lǐng)域的國際會議上，今年也有論文入選了此次sigkdd會議，阿里集團(tuán)共有14篇文章被收錄;同時，它也通過主辦算法大賽來增進(jìn)算法交流，例如攜手國際人工智能的盛會ijcai以及阿里云天池平臺，共同舉辦的ijcai 2018阿里媽媽國際廣告算法大賽。

值得一提的是，胡可就職于阿里媽媽搜索直通車算法團(tuán)隊，他主要的工作內(nèi)容是做廣告排序算法，如應(yīng)用深度學(xué)習(xí)模型解決業(yè)務(wù)問題，團(tuán)隊也在應(yīng)用并優(yōu)化多種深度學(xué)習(xí)模型，其日常工作中積累的深度學(xué)習(xí)經(jīng)驗在比賽中起到了關(guān)鍵作用。

斬獲三項大獎的秘密：空氣預(yù)報特征+深度學(xué)習(xí)模型解決空氣預(yù)測難題

與往年只有比較終成績獎項不同，kdd cup 2018計入了比賽過程中的成績并設(shè)立了三項大獎——“the general track”、“比較后10天專項獎”、“比較佳長期預(yù)測獎”，從三個維度來獎勵比賽中表現(xiàn)突出的隊伍。而“getmax”也因全面而突出的表現(xiàn)，從4000多個參賽隊伍中脫穎而出，成為唯*一個斬獲三項大獎的隊伍，分別取得一項亞軍、兩項的成績。

本屆賽題十分獨特，空氣質(zhì)量預(yù)測不僅具有規(guī)律性弱、不穩(wěn)定、易突變的特點，并且因為要預(yù)測未來48小時中的每個小時，以及北京/倫敦城市內(nèi)幾十個預(yù)測地點，建模時間序列以及地點拓?fù)潢P(guān)系給機(jī)器學(xué)習(xí)模型帶來挑戰(zhàn)。

在胡可看來，比較終的成績主要來自于特征與模型兩方面的優(yōu)化。

特征方面：

發(fā)現(xiàn)風(fēng)速和風(fēng)向是長期預(yù)測與突變預(yù)測的關(guān)鍵，所以在比賽中在時間與空間維度細(xì)化了天氣預(yù)報的特征，并且運用噪音處理與分箱平滑、以及神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)調(diào)整解決天氣預(yù)報訓(xùn)練數(shù)據(jù)缺失引起的不一致問題。

模型方面：

除運用細(xì)粒度特征工程的樹模型外，也運用深度學(xué)習(xí)模型進(jìn)行相對自動的特征間以及序列間關(guān)系挖掘。并且針對長時間序列問題的特點，對dnn網(wǎng)絡(luò)與rnn網(wǎng)絡(luò)分別進(jìn)行了優(yōu)化調(diào)整，解決了序列間預(yù)測值接近、長序列預(yù)測值不穩(wěn)定等問題。

之所以會用以上的思路解決問題，胡可說，工作場景起到了在實際問題中積累思路與技術(shù)的作用，“對深度學(xué)習(xí)模型的應(yīng)用是前面隊伍排名區(qū)分的關(guān)鍵，在比賽中應(yīng)用的dnn/rnn模型在自己工作中的廣告領(lǐng)域有很多探索。”

阿里媽媽打造ad tech：用技術(shù)進(jìn)步驅(qū)動營銷

“比賽中的有些開源解決方案，具有與實際工業(yè)界互相促進(jìn)的作用。”胡可對算法比賽很感興趣，他也是去年kdd cup 的獲得者。

之所以活躍于的算法大賽中，胡可表示，kdd cup是工業(yè)界和學(xué)術(shù)界都非常關(guān)注的一個比賽，也產(chǎn)出過很多對業(yè)界有影響的技術(shù)，比如kdd cup 2012 產(chǎn)出的xgboost和ffm模型對工業(yè)界產(chǎn)生了很大的推進(jìn)作用，而在工業(yè)界有了一定應(yīng)用沉淀后，又不斷地對這兩種模型進(jìn)行優(yōu)化。

他也希望能夠向這個方向努力，預(yù)測環(huán)境問題與廣告問題看似場景不同，但技術(shù)本身是相通的，工作和比賽都是在針對具體問題運用機(jī)器學(xué) 習(xí)相關(guān)算法進(jìn)行建模與優(yōu)化。在算法比賽中一方面將工作中熟悉的技術(shù)應(yīng)用于各種實際問題，另一方面則加深對技術(shù)的理解并且將新的理解應(yīng)用到未來工作中。

這也正是阿里媽媽技術(shù)團(tuán)隊所倡導(dǎo)的，作為阿里巴巴旗下的大數(shù)據(jù)營銷平臺，阿里媽媽在今年提出了打造營銷科技ad tech的品牌戰(zhàn)略，在其原有業(yè)務(wù)的探索基礎(chǔ)上，加深與學(xué)術(shù)界的交流，阿里媽媽每年都有一些新論文入選到ijcai、www、aaai等技術(shù)領(lǐng)域的國際會議上，今年也有論文入選了此次sigkdd會議，阿里集團(tuán)共有14篇文章被收錄;同時，它也通過主辦算法大賽來增進(jìn)算法交流，例如攜手國際人工智能的盛會ijcai以及阿里云天池平臺，共同舉辦的ijcai 2018阿里媽媽國際廣告算法大賽。

在阿里媽媽ad tech的理念之下，通過技術(shù)的不斷進(jìn)步，來驅(qū)動廣告場景的持續(xù)優(yōu)化，理想正在逐步照進(jìn)現(xiàn)實。