每天，谷歌地圖都為成千上百萬的人們提供方位指示，實時路況信息以及商業信息。為了提供最佳的用戶體驗，地圖信息需要不斷的根據現實世界的變化做出調整。
街景車每天收集數百萬張圖片，如果用人工分析每天超過800億張高清晰圖片來找出其中的新變化或者更新地圖信息，顯然是不可能的。因此，谷歌地面實況團隊（Ground Truth team）的目標之一，就是從地理位置圖像自動提取信息來升級谷歌地圖。
雷鋒網了解到，在「從街景圖像中提取基於注意機制的結構化信息」（Attention-based Extraction of Structured Information from Street View Imagery）一文中，谷歌描述了所採用的方法——怎樣在街景視圖中使用深度神經網絡自動且準確無誤地讀出街道名稱。
我們的算法系統在挑戰「法國街道名稱識別數據集」（French Street Name Signs (FSNS) dataset）中達到了84.2%的正確率，明顯優於之前的最優系統。重要的是，谷歌的系統在提取其他類型信息也是很容易擴展的。比如現在幫助谷歌自動提取商店前面的商戶名稱。目前該模型已經開源。
圖中為法國街道名稱標識數據集中的一個例子，被谷歌的系統正確識別。上圖為同一標識的四種不同視角
自然環境中的文本識別在計算機視覺和機器學習上是一個非常具有挑戰性的問題。傳統的光學字符識別（OCR）系統主要側重於從掃描的文檔中提取文本。在自然場景中由於視覺偽影，如失真、閉塞、定向模糊、雜亂的背景或不同的角度給提取文本提升了難度。
谷歌從2008年開始致力於解決這一問題，使用神經網絡模糊了街景圖像中的臉和車牌，以保護谷歌用戶的隱私。從最初的研究中，團隊意識到經過足夠的標記數據訓練後，機器學習不僅能保護用戶的隱私，而且還可以自動升級谷歌地圖相關的最新信息。
2014年穀歌地面實況團隊在街景門牌號數據集（SVHN）上公布了讀取街道號碼的方法，隨後暑期實習生Ian Goodfellow（現為谷歌員工）進行了運用。
這個工作不僅是出於對學術的興趣，而且也是使谷歌地圖更為精確的關鍵。如今得益於這個系統，超過三分之一的全球地址已經在谷歌地圖上有了自己的位置。在一些國家，如巴西，這個算法增加了超過90%的谷歌地圖地址，大大提高了谷歌地圖的可用性。
下一步是將這些技術擴展到街道名稱。為了解決這個問題，谷歌創建和發布了法國街道名稱標誌（French Street Name Signs，FSNS），有超過100萬的街道名稱訓練數據集，旨在提高人們對OCR模型在實際使用情況下的認識。
FSNS是谷歌經過多年的努力而構建的，它比SVHN數據集更加龐大，也更具挑戰性，因為如果要準確識別某個街道標識，可能需要對各個角度所拍攝的圖片進行整合處理。
上圖是識別起來很有難度的一些標識，也被谷歌系統通過對圖像的理解而正確判斷了。尤其是第二個，不過這個模型在之前學習了語言模型，使其能夠消除歧義，並正確識別出街道名。
值得一提的是，在FSNS數據集中，同一路標在少於四個獨立視圖的情況下會以增加隨機噪聲的方式。
谷歌實習生Zbigniew Wojnazai在2016年夏天用這個數據集開發了一個深度學習模型，它能夠自動標註新的街景視圖。這個新模型的一個優點是，它可以根據日常的命名習慣進行文本規範。
上圖的例子中，可以將"AV."轉化為"Avenida"，"PRES."轉化為「Presidente」這是我們期望看到的結果
在這個圖中，模型沒有被圖中的兩個街道名稱迷惑，將"Av"正確轉化為"Avenue",同時也識別出了數字"1600"
儘管這個模型非常精確，它依然有15.8%的序列錯誤率。不過，在分析錯誤樣本後，團隊發現，其中48%是由於地面實況錯誤，也就是說，模型與標記質量呈現的準確度基本一致。（在我們的論文中有詳細的錯誤率分析）
這個新系統結合了提取街道號碼技術，使我們能夠直接從圖像創建新的地址。現在，每當一輛街景車在新建的道路上行駛時，我們的系統可以捕捉上千萬張圖像，提取街道名稱和數字，並自動在谷歌地圖上創建和定位新地址。
但自動為谷歌地圖創建地址是不夠的。此外，我們還希望能夠為商業提供導航。在2015，我們發表了「從街景圖像中進行大規模的商業發現」（Large Scale Business Discovery from Street View Imagery）一文，文中提出了一種方法可以準確地檢測商店外牆的標誌。
然而，檢測到商店外牆，仍然需要準確地提取它的有用名稱。模型必須找出哪個文本是商戶名稱，哪些文本是不相關的。谷歌稱這種提取為「結構化文本」信息的提取。它不只是文字，而是具有語義意義的文本。
使用不同的訓練數據，我們用來讀取街道名稱的模型結構也可以用來準確地提取商業名稱。在這種特殊情況下，如果我們已經知道這個商戶在谷歌地圖的位置，可以只提取商業名稱來進行驗證，使之能夠更準確地更新商業列表。
如上圖所示，雖然沒有從圖片中獲得任何有關真實地址的信息，但系統還是正確識別出了商戶的名字Zelina Pneus，而且沒有被旁邊的輪胎品牌所騙。
模型需要處理800多億個街景圖像，需要強大的計算能力。這就是為什麼谷歌地面實況團隊採用TPU，可以大幅減少我們的推理計算成本。
人們依賴於谷歌地圖的精準性來協助他們工作和生活。同時，在景觀、道路和商業不斷變化的情況下，谷歌地圖的更新所面臨的技術挑戰，遠遠還沒有解決。為超過十億的谷歌地圖用戶創造更好的用戶體驗，一直是谷歌地面實況團隊追求的目標。
http://news.zol.com.cn/638/6381721.html news.zol.com.cn true http://news.zol.com.cn/638/6381721.html report 4385 每天，谷歌地圖都為成千上百萬的人們提供方位指示，實時路況信息以及商業信息。為了提供最佳的用戶體驗，地圖信息需要不斷的根據現實世界的變化做出調整。街景車每天收集數百萬張圖片，如果用人工分析每天超過800億張高清晰圖片來找出其中的新變化或者更新地圖信息，顯然...