NYU陳溪博士:運籌學與機器學習的融合交叉

2020-12-25 雷鋒網

雷鋒網 AI 科技評論按:從一個旁觀者的角度看來,陳溪的履歷無疑令人豔羨:從西安交通大學少年班一路至計算機系畢業,隨後到卡耐基梅隆大學(CMU)商學院攻讀碩士學位,一年後轉到了 CMU 的機器學習系;五年博士畢業後,陳溪跟隨人工智慧泰鬥、UC 伯克利教授 Michael I. Jordan 進行博士後研究;在這之後,他從西海岸橫跨北美洲,於紐約大學任商學院助理教授。

機器學習專業出身的陳溪,美國研究生涯始於商學院的運籌學和統計學,在經歷六年的機器學習研究後,如今又重回商學院。運籌學與機器學習之間,能產生怎樣奇妙的化學反應?陳溪又是如何在這兩門學科中尋求交叉平衡與科研創新的?雷鋒網(公眾號:雷鋒網) AI 科技評論與陳溪博士進行了一次交流,了解了他在運籌學與機器學習之間的十年研究心得。

陳溪博士目前是紐約大學商學院助理教授,CMU 機器學習系博士,也曾跟隨 Michael I. Jordan 做了為期一年多的博士後研究。同時,陳溪博士拿過 Google Faculty Research Award,Adobe Data Science Research Award, Alibaba Innovation Award,在 2017 年還獲得了福布斯雜誌全美 30 under 30 最有影響力的青年科學家提名。陳溪博士的主要研究領域為:機器學習、高維統計和運籌學。

圖靈獎唯一華人得主姚期智院士曾如是強調學科交叉的重要性:「多學科交叉融合是信息技術發展的關鍵:當不同的學科、理論相互交叉結合,同時一種新技術達到成熟的時候,往往就會出現理論上的突破和技術上的創新。」

尤其在今天大數據的環境下,學科的交叉與融合愈發明顯。作為一位在運籌學與機器學習領域都有過長期涉獵和學習的老師,陳溪博士對於這一觀點具有極強的發言權。

陳溪的碩士第一年是在商學院度過的,現在看來,說是無心插柳也不為過。即使在進入機器學習系之後,陳溪博士仍然與運籌系的老師有著密切的合作;而在商學院任教後,他也能夠迅速地融入商學院的文化。此外,這一年的學習也給陳溪博士帶來了更多意想不到的收穫。「我在 CMU 運籌系的第一年學習了非常多優化方面的知識,而這些算法後來成為了研究機器學習中非常重要的工具,用於進一步解決機器學習的問題。」

因為具備了不同學科的豐富背景,陳溪博士可以將很多機器學習中比較前沿的技術引入到商學院中,並用機器學習、大數據等新技術解決商學院的傳統問題。

機器學習發展至今,研究者所解決或攻克的問題相對比較集中,即圍繞視覺(檢測、識別、分割)、語音(識別、合成)、自然語言處理(翻譯、文本分析)等領域展開,而且有很多國內的創業公司也在研究上述問題。

但在陳溪博士看來,一些企業級服務,甚至可以說是商學院中的一些服務,如供應鏈、動態定價與推薦,在機器學習研究者中關注得還比較少。目前整個行業還缺乏同時具備這兩個領域知識的人,即有機器學習的背景,又能了解商學院的核心問題,把機器學習的方法和技術引入商學院的傳統領域中,並解決相應問題。

斯坦福前任商學院的院長 Garth Saloner 在 2016 年曾說過,「如果你是一個斯坦福 MBA 的學生,請趕快去工程學院,儘可能地學習 AI、深度學習和自動化的知識。就是現在。」在這些學生進入公司管理層後,他們需要更多地理解大數據知識和相應算法,才能對企業決策產生正面的影響。在陳溪博士看來,五年以前,整個商學院幾乎沒有計算機科學家的存在,MBA 的學生也缺乏相關的知識與背景。但近年來,一些美國高校開始招募一些機器學習人才進入商學院,用合適的術語和技術包裝,用適於商學院學生理解的方式傳遞給他們。

在課程中,陳溪博士會融入一些機器學習的新案例,讓商學院的同學們了解更多技術層面的知識。雖然在他看來,同學們雖然對計算機知識相對陌生,也缺乏相關的訓練,但在當下背景下,意識到計算機學科重要性的學生們也擁有極強的求知慾。

在職業生涯的規劃中,陳溪博士非常感謝他在博士後期間的導師 UC 伯克利教授 Michael I. Jordan。「和 Jordan 教授做研究,能充分地感受到他真的是一位大師。」首先,Jordan 教授給予了學生極大的研究自由度。在每周的交流中,Jordan 教授極少規定學生手上要做的項目,而是通過溝通熱點及問題,啟發學生主動思考;此外,Jordan 教授對於學生的職業發展寄予高度的關注和幫助,會花大量的時間幫助每一個博士後準備自己的 job talk,並且提供了諸如團隊建設、項目基金申請等寶貴的經驗。整個團隊的氛圍也非常融洽,每個人都具有充分的合作精神。在一年多的博士後經歷中,陳溪博士不僅在眾包分配研究中取得了相關進展,也懂得了為師之道,並且身體力行地應用到自己的教學過程中。在這個過程中,陳溪博士也明確了自己未來的研究方向。

陳溪博士目前的一個研究核心是從理論和實踐兩個角度,針對基於大規模在線數據的學習與決策展開研究。

在理論層面,陳溪博士主要研究的高維數據在統計推斷與計算方面的內容,並把統計推斷和隨機優化做了有機的結合。

目前傳統統計學中的數據基本上是靜態的,而且是事先給定的,但這與實際的應用場景相去甚遠。與傳統統計學家相比不同的是,陳溪博士的研究更關心各種場景下海量高維數據的處理。「如果我們已經擁有一個用戶很多的歷史購買數據,那麼它的 profile 已經是非常高維的;此外大量的數據在實際場景下都是動態產生的。」

這一場景會面臨兩個問題。一個是,如何在這種動態大規模高維數據場景下做統計推斷;另一個是,當數據達到一定量級,在分布式場景下,如何在機器間的交互代價(communication cost)與推斷效率中進行平衡,並考慮現實計算的各種規範(constraint)。

與機器學習科學家相比不同的是,機器學習更關心高維數據的估計和預測,而從陳溪博士的研究角度來看,他更關心的是推斷(inference),即規劃結果的「uncertainty」程度。

在實踐層面,陳溪博士更多地考慮到了動態定價、動態推薦及眾包分配方面的應用問題。「比如每個用戶發起一個檢索(search),那麼數據會上傳到伺服器中,因為每天都會有無數的人在做檢索操作,那麼這便成為了一個大規模的用戶數據,如何通過這些數據更好的服務於用戶,比如進行精準的推薦。」

而杉數科技的成立,也正是機器學習與運籌學結合應用的一個產物。見證杉數科技成長的陳溪博士,從公司成立以來一直與幾位創始人保持密切聯繫,一同探討如何用機器學習服務國內更多的物流公司、電商公司。一方面,陳溪博士希望企業能將大家的知識轉化成生產力;另一方面,企業產生的數據也會促進很多新的研究問題。

從一個學者的角度出發,陳溪博士仍對學術研究抱有一顆沉靜之心。學術界有不少教授投身產業界,在更大的技術舞臺上發揮才智,但整個大環境還是需要另一些老師靜下心來理解算法的本質,才能創造出更多新的有價值的模型與方法。「比如神經網絡調參,我們大家都知道,其實它需要大量的經驗,有人說它就像一門藝術,而不是一門科學。那麼如果我們能真正去理解它,可能以後我們不需要花這麼多的時間去調參,而是可以用理論指導算法的設計,甚至對一些傳統問題提出全新的想法。」相信在未來,我們能在運籌學與機器學習的交叉融合上,更多地看到全新的成果。

更多資訊敬請關注雷鋒網 AI 科技評論。

雷鋒網原創文章,未經授權禁止轉載。詳情見轉載須知。

相關焦點

  • 集齊葉蔭宇、藍光輝、陳溪、李建、王子卓的大牛圓桌會,關於算法...
    、機器學習領域的頂尖教授、學者出席並發表學術演講,他們分別是史丹福大學李國鼎工程講座教授葉蔭宇,喬治亞理工學院終身教授藍光輝,紐約大學助理教授、Michael I.Jordan 的高徒陳溪,清華大學交叉信息研究院助理教授李建以及杉數科技 CTO、明尼蘇達大學助理教授王子卓。
  • 留學北美| 想要申請運籌學博士?解讀Lehigh University 工業與系統工程博士項目
    國內學生在申請美國博士項目時,面臨的一個比較大的挑戰是「如何找到合適方向的導師」。學校網站信息優勢更新不夠及時,對各位老師的研究方向介紹不夠詳細,一個一個的翻論文,對於申請季時間寶貴的申請者而言,又非常浪費時間。這個專欄希望幫助申請者在短時間內全方位的了解一個學校的運籌學相關博士項目,為大家的申請提供收集信息的快速通道。
  • 【學界】深度學習如何影響運籌學?
    由此可以看出,絕大部分機器學習模型的訓練過程,都是首先將其建模為一個運籌學問題,然後採用相應算法來求解的。從這個角度看,機器學習(包括深度學習),是運籌學的一個應用領域。在使用運籌學來解決各行各業形形色色問題的過程中,研究者在理論和應用層面發展出了許多類型的優化算法,也解決了不少實際問題。各類運籌學的期刊、會議有很多,每年至少有幾千篇論文、專利發表出來。
  • 香港中文大學(深圳)數據科學學院招收博士
    研究方向計算機科學;運籌學;統計學;運營管理和決策科學;機器學習;及相關交叉領域招聘詳情香港中文大學(深圳)設立數據科學博士專業,旨在培養學術成績優異且有高度進取心的數據科學相關領域的高級研究性人才,所涵蓋的研究領域包括:計算機科學、運籌學、統計學、運營管理和決策科學、機器學習及相關交叉領域
  • 杉數科技葛冬冬:大數據和人工智慧是從0到1,運籌學是從1到2
    近日,在由機器之心主辦的全球機器智能峰會(GMIS 2017)上,杉數科技聯合創始人、首席科學家葛冬冬在演講時表示,運籌學是一個交叉學科,跟各個學科都可能有一定關係,因為任何事情都需要優化,即尋找解決決策的「最優解」。如果說大數據和人工智慧的出現到應用是喚醒了很多國內企業的量化意識,完成了從0到1的關鍵一步,那麼運籌學工具在優化、解決問題時就是從1到2,甚至到更多。
  • 通向對衝基金之路,哥倫比亞大學運籌學學神專訪
    這期專訪,探路君請到了在哥倫比亞大學運籌學的劉同學一起帶大家了解一下這所常春藤名校 Introduction 哥倫比亞大學是一所位於美國紐約曼哈頓的世界頂級私立研究型大學,為美國大學協會的十四所創始院校之一,常春藤盟校之一。
  • 美國研究生運籌學碩士MSOR名校申請都在這裡
    近年來運籌學專業也逐漸成為了一個很熱門的專業,被很多留美學子所青睞。今天跟大家介紹一下美國最牛的幾所院校的運籌學碩士項目:★ 想要諮詢和辦理美國留學的同學和家長請撥打電話: 177 1031 1197 (微信同號)聯繫金吉列上海美國部首席諮詢顧問季永傑老師。
  • 呂建軍博士赴美參加管理科學與運籌學協會2015年會
    2015年11月1-4日,呂建軍博士赴美國費城參加管理科學與運籌學協會(The Institute for Operations Research and the Management Sciences, INFORMS)舉辦的INFORMS2015年會。
  • 運籌學在中國
    中國第一個運籌學小組是在錢學森、許國志先生的推動下,在1956年於中國科學院力學研究所成立。錢學森先生在麻省理工學院取得碩士學位,在加州理工大學取得博士學位後成為該校的第一位戈達德講座教授。許國志先生在堪薩斯大學取得博士學位後,在馬裡蘭大學流體力學和應用數學研究所當研究員。他們兩人於1955年回到祖國致力於新中國的科技事業。可見在中國運籌學一開始就被理解為與工程有密切聯繫的學科。
  • 順豐科技「智慧物流」論壇:人工智慧的價值在於提升物流中的運籌學
    當前很多人認為物流就是搬運貨物,但其實物流背後涉及到數學、統計學、運籌學,並且通過與人工智慧機器學習等技術交叉結合可以更加有效的解決許多更複雜更難計算的問題。田民呼籲大家要冷靜下來看待人工智慧,了解人工智慧和機器學習背後的原理和適用場景,這也是此次活動的意義所在。
  • NYU和哥大Bridge課程為你設計
    # NYU Tandon Bridgehttps://engineering.nyu.edu/academics/programs/nyu-tandon-bridge課程對象:有志於申請STEM碩士學位但無專業背景的學生開設院校:
  • 一書吃透機器學習!《機器學習基礎》來了,教材PDF、PPT可下載
    有Reddit網友評論,這部教材足夠紮實、內容足夠基礎,學機器學習理論,熟讀這本書就足夠了。書中的內容基本上涵蓋了機器學習當前階段的熱門基礎概念,同時還附上了算法論證所需的理論基礎和工具。比如第四章模型選擇,又細分成了9個章節,比如估計和近似誤差、經驗風險最小化、結構風險最小化、交叉驗證、n次交叉驗證等。
  • 幾何與現場 - 陳溪鄉鄰中心
    陳溪鄉鄰中心,正是以一種相似的姿態呈現在村民的眼前。屋簷壓低到人的高度以下,暗示其入口的隱蔽性,向上的坡屋頂將人的視線引向遠方的群山;25米跨度的大梁和場地若即若離,猶如Castagno的白桌面橫穿過整個視線。
  • 哲學與認知科學的交叉融合
    原標題:哲學與認知科學的交叉融合 本期主持:劉曉力(中國人民大學哲學院教授) 本期主題:哲學與認知科學的交叉研究 主持人語 改革開放40年來,中國的科學技術水平有了長足發展。相應在學科建構上,哲學和認知科學呈現出交叉融合的趨勢,道德問題和人工智慧的前景問題成為哲學和認知科學領域的熱門話題。面對當今科學技術發展帶來的諸多新挑戰,本期組織3篇文章,通過對哲學與認知科學交叉和融合相關問題的深入探討,嘗試給出研究路徑上的可能方向,以期引發學界對相關問題的進一步討論。
  • 美國留學|運籌學專業解析
    圖示為沃頓商學院什麼是運籌學?運籌學(operations research,又被稱作作業研究),是一門應用數學學科,利用統計學和數學模型等方法,去尋找複雜問題中的最佳或近似最佳的解答。運籌學是一個跨學科的交叉學科 ,介於工業和管理之間 ,涉及到的主要研究領域有最優化﹙optimization﹚,應用概率以及隨機模型﹙appliedprobability and stochastic models﹚,物流和供應鏈﹙logisticsand supply chain﹚,決策分析﹙decisionanalysis﹚,仿真﹙simulation﹚。
  • 機器學習 | 「交叉驗證」到底如何選擇K值?
    交叉驗證(cross validation)一般被用於評估一個機器學習模型的表現。
  • 跨學科首選,商業分析前身,且看美國運籌學
    ​運籌學是一門交叉學科,也是一個跨學科首選作為一門交叉學科,OR從應用數學出發,汲取CS,Machine Learning(工業、人工智慧、金融)的側重和運籌學人才研究領域的多元化;與此同時,歐洲、香港、澳洲也開設有運籌學的項目,但他們大多數開設在商學院,主要還是側重對金融問題的解決。
  • 浙江上虞陳溪太平山景區,人文古蹟眾多,被遺忘的世外桃源
    陳溪,一個深深嵌於四明山南路大山裡的明珠,青山,綠水,層層的梯田,零星的農家小屋,山路邊的小溪流水,儼然勾勒出一處世外桃源。在這裡爬山不會覺得很累,因為耳畔聽著清脆的鳥鳴,呼吸著新鮮的空氣,看著美麗的自然景觀,一切都令人覺得心曠神怡。