暗網搜尋引擎Memex:美帝最新製造的犯罪追蹤神器(含視頻)

2021-02-15 FreeBuf

早在一年前,美國國防部先進研究項目局(DARPA)曾透漏過一個秘密項目——一款新型搜尋引擎,通過深度挖掘暗網(Dark Web),獲取Google搜索和其他商業搜尋引擎未能涉及到的所有隱秘信息。現在,它已經悄然問世。

FreeBuf科普:什麼是暗網

暗網並非十分龐大,甚至沒有想像中那樣特別的神秘。事實上,所謂「暗網」都是公共可見的網站,但卻將真實的伺服器IP隱藏了而已。這意為著,任何人都可以訪問暗網,但「暗」就暗在這些網站隱藏極深,難以調查的幕後。

【FreeBuf視頻】走近科學:如何訪問暗網(the Dark Web)(請點擊文章最下方閱讀原文)

神秘的「暗網搜尋引擎」

暗網搜尋引擎項目被命名為「Memex」,測試顯示項目運營效果良好。


上周日晚,Memex首度亮相於公眾,我們有幸搶先一睹這款特別的搜尋引擎的風採——這是一款以打擊犯罪為目的搜尋引擎,美國國防部五角大樓的研究機構批准Scientific American新聞網預睹其真容,然後讓60分鐘節目組獨家對這款新技術的結晶進行了視頻報導。

Memex這個單詞來自於記憶(memory)與索引(index)的組合,它基於開源的數字可視化搜索分析程序,通過與後端伺服器軟體交互,完成複雜的計算和數據分析。

通過用戶搜索的信息,Memex搜尋引擎會對相關內容進行抓取。經過爬蟲對頁面內容的遞歸獲取,有效地識別不同數據塊之間的關係。研究人員能夠利用搜索到的空間和時間的數據構建數據圖,進行可視化分析。

視頻介紹

下面附上的視頻能給各位FreeBuf讀者更直觀的感受和理解。

【請點擊文章最下方的閱讀原文】

暗網是一個遍布婦女兒童綁架、色情信息、毒品交易、網絡犯罪和人口販賣的邪惡聚集地,但是由於暗網的隱秘性極高,所以它能輕易躲避主流引擎的搜索。

當然,隨著暗網搜尋引擎的誕生,相信它們的好運也就到此為止了。

設計理念

暗網搜尋引擎Memex用於保護網絡免受黑客、人販子或者其他類型罪犯的的侵害。它的設計理念即:擴展搜尋引擎的能力,根據特定人物的興趣迅速進行信息的全面整合。

Memex搜尋引擎的研究發起者Chris White等人詳談了整個暗網搜尋引擎的工作原理,以及它是如何幫助執法機構進行調查的。

White表示:「網際網路比人們想得要複雜得多。據統計分析,Google、微軟bing以及雅虎搜索,只收錄了網絡上大約5%的web內容。」很明顯,這給網絡犯罪留下了很大的潛在發展空間。

在上述有關Memex搜尋引擎的視頻片段裡,大家還能看到美國國防部先進研究項目局的Dan Kaufman。這位主管在視頻裡表示:「Memex的理念簡化來說就是——如何挖掘不易被發現的東西。」

White嚴肅地說:「大多數網民都是守法公民,但是也肯定會存在一些網絡寄生蟲。我們會剝奪其利用網絡侵害我們的能力,創造一個更加美好的網絡環境。」

項目進度

Memex如今還處於beta階段,現有一個政府機構和一個非政府組織負責測試。當然,在幾周後的下一測試階段,Memex還會擴大內測範圍。

「這一輪的測試,其中一個主要目標就是分析照片。比如對於毒販面部的匹配,或者是根據圖片背景中電視屏幕映出圖像,進行模糊搜索匹配。另一個目標,則是嘗試用不同用戶界面,嘗試使用流媒體結構來評估時間敏感的數據。」

這意味著在暗網搜尋引擎Memex的幫助下,美國國防部先進研究項目局(DARPA)有可能會根據圖片中電視屏幕的上的倒影圖像,通過圖像模糊匹配技術進行分析定位,在使用一定手段確認後對罪犯實施抓捕。


這聽起來似乎如好萊塢電影一般富有奇幻色彩,不過Memex團隊強調,這一切「黑科技」本意只是降低犯罪率,而不是侵犯大多數人的隱私。

相關焦點

  • 全球最大暗網兒童色情網站被搗毀,暗網到底是啥?
    據BBC報導,10月16日,由美國、英國、韓國、德國調查人員組成的聯合調查組宣布,他們已經搗毀了一個名為「歡迎訪問視頻」(Welcome To Video)的暗網兒童色情網站,並在全球38個國家逮捕了337名網站用戶,其中大部分來自美國、英國、韓國、德國、沙烏地阿拉伯、阿聯、捷克、加拿大、愛爾蘭、西班牙、巴西和澳大利亞等國。
  • 淫穢視頻 51部,色情圖片 214 張,會員超 6萬!國內首起暗網涉黃案告破
    2017 年,計算機專業出身的犯罪嫌疑人王某開始在暗網上架設淫穢網站的論壇,論壇上提供淫穢視頻、色情圖片,甚至換妻交友等信息.因暗網的隱蔽性特徵,王某在暗網搭建的這一平臺直到 2019 才被無錫警方發現。
  • Ichidan:最強暗網搜尋引擎,暗網版的shodan!
    此服務位於ichidanv34wrx7m7【.】onion,從長遠角度來看,其很可能成為一款供任何訪問者調查暗網服務的實用工具。利用Ichidan,維克多·蓋夫斯得以在數分鐘之內通過暗網服務發現各類安全漏洞。研究人員們同時強調稱,其中的一個Onion站點還提供大量埠信息。
  • 騰訊協助警方破獲亞洲首起暗網淫穢色情網站案件,會員超6萬!
    5月7日,江蘇省無錫市公安局召開新聞通氣會,對外發布該市警方破獲的亞洲首起「暗網」平臺案件詳情。該案中,男子王某在「暗網」上搭建淫穢網站、傳播淫穢物品牟利,被警方查獲時,網站註冊會員已達6萬多名。「暗網」具有網站的使用者不可被追蹤、網站的訪問者不可被追蹤的特點,具有極強的匿名性和保密性,偵查難度比較大。
  • 警方破獲全國首起「暗網」淫穢色情網站案,會員超6萬名
    該案中,男子王某在「暗網」上搭建淫穢網站、傳播淫穢物品牟利,被警方查獲時,網站註冊會員已達6萬多名。「暗網」具有網站的使用者不可被追蹤、網站的訪問者不可被追蹤的特點,具有極強的匿名性和保密性。偵查難度比較大,「暗網」網站上交易的往往是一些非法的內容和商品,比如公民信息、電腦病毒、淫穢色情信息。
  • 暗網」的印象是暗殺、人肉搜索、毒品交易、色情直播?真實的暗網到底是怎樣呢?
    「暗網」一詞第一次在國內被大眾所廣泛認知,是從2017年中國訪美女學者章瑩穎遇害開始的。在這一事件的發酵下,「暗網」給我們留下了暗殺市場、人肉搜索、比特幣犯罪、非法槍枝交易、偽造美國護照、隱秘毒品交易、色情直播、自殺聯盟等黑暗和罪惡的印象。但真實的暗網到底是怎樣的一個世界呢?
  • 招募恐怖分子、組織恐怖襲擊、買賣毒品……全球兩大「暗網」交易市場被關閉 你了解它嗎?
    在公開的網絡之外,還有一個普通人無法觸及的地下網絡世界,這些網站不對普通人公開,不能通過普通超連結訪問,不屬於那些可被標準搜尋引擎索引的表面網絡。用戶需要用加密軟體登陸,在上面從事武器、毒品、人口的非法交易。有專家將網際網路比作冰山,人們通常訪問的網絡只是露在水面上的部分,而在水面以下,還存在看不見的暗網。
  • 有人通過暗網非法倒賣個人信息被判刑......
    一男子好奇心作祟接觸了暗網,隨後通過暗網倒賣公民個人信息,殊不知自己的行為已構成侵犯公民個人信息罪……去年8月中下旬的一天,王某通過VPN翻牆下載了一款國外聊天軟體,他在該軟體上搜索「資料庫」,在一個「社會工程學交流」的群裡結識了「小火炬」。「小火炬」稱自己有客戶綁定關係信息數據,這立馬引起了王某的興趣。
  • 全球最大「暗網」黑市被關閉
    在《華爾街日報》看來,被父親稱讚「很棒」的卡澤斯對自己的違法行為心知肚明,這位網絡黑市維護者究竟是不是在縱容犯罪,似乎不言自明。    下一個「阿爾法灣」在哪裡?    在暗網中,「阿爾法灣」是眾多黑市交易平臺之一。
  • 聚焦 | 招募恐怖分子、組織恐怖襲擊、買賣毒品……全球兩大「暗網」交易市場被關閉 你了解它嗎?
    在公開的網絡之外,還有一個普通人無法觸及的地下網絡世界,這些網站不對普通人公開,不能通過普通超連結訪問,不屬於那些可被標準搜尋引擎索引的表面網絡。用戶需要用加密軟體登陸,在上面從事武器、毒品、人口的非法交易。有專家將網際網路比作冰山,人們通常訪問的網絡只是露在水面上的部分,而在水面以下,還存在看不見的暗網。
  • 美帝人民的人肉搜索更嚇人!輸入即見個人詳細信息 美國華裔建議快刪除
    但是美國的情況甚至更加觸目驚心,美帝人民的人肉搜索更嚇人!輸入即見個人詳細信息  一些美國的網站都可以單憑你的名字輕鬆查找到你的手機、住址、指紋、手機通訊錄、社交媒體聯繫人。光天化日,毫無隱私可言。美國華裔建議快刪除。
  • 帝吧飯圈再次出徵,美帝網絡全面飄紅
    他們,中國連續三代的愛國網民,在此次美帝禍亂香港時,勇敢的站了出來,他們為國而戰。其實,還有更多,帝吧與飯圈只是其中的最傑出代表。特別是在8月,帝吧網友出徵、飯圈女孩大作戰及最後的聯合出徵,向全世界展示了中國青年的強烈的愛國心與強大的戰鬥力。他們,讓美帝害怕了!
  • 暗網中的戀童癖,n號房只是冰山一角
    這不是危言聳聽,因為早在兩年前,就曾爆出過暗網最大的戀童癖網站——Welcome to Video總有這麼一群人,他們內心對未成年有種畸形的情感,充斥著欲望和暴力,而這類人有個統一的名字:戀童癖。為了滿足這部分人的欲望,一些「神秘網站」便應運而生,「暗網」就是最典型的代表,那裡充斥著各種違法行為。
  • 真實[暗網]視頻,小心你旁邊的攝像頭
    雖然說是《解除好友》系列的第二部,但和前作沒有任何關係,完全可以獨立觀看。硬著頭皮假扮卡戎4 和卡戎68聊天。因為這是暗網的「遊戲之夜」,成千上萬的「卡戎」們就坐在屏幕的後方。看著馬蒂亞斯的驚慌失措,看著馬蒂亞斯和朋友們自作聰明的掙扎,再看著他們一個個走向末路。這就是「卡戎」們的狂歡……
  • 揭秘暗網:親身經歷告訴你暗網是什麼樣的?
    提起暗網,中文的讀者對它的印象一般不太好,覺得裡面充滿了罪惡和犯罪。
  • 解除好友2:暗網 Unfriended: Dark Web (2018)
    電腦上所有的帳號密碼都有保留,剛開始他並不以為然,註銷並登陸了自己的帳號,和自己的朋友視頻聊天。在和朋友聊天的時候,他發現電腦卡頓異常,經常閃退,但是電腦屏幕卻很乾淨,所以在網上找到了檢測程序的方法,發現電腦的內存幾乎已滿,只是大多數都是隱藏文件。他覺得驚奇,於是和朋友們提起了這件事,並且將屏幕分享給了自己的朋友。
  • 暗網曾經最火的女孩,被生父侵犯
    來源:網絡暗網,顧名思義就是網絡的黑暗面,裡面隱藏著各種可怕的信息,除了槍枝、毒品等違法交易外,還包含很多少兒不宜的視頻,一類為恐怖重口
  • 這部紀錄片講述了真實的「暗網」
    」和「深網」拉進了大眾視野。#03 Exploit 剝奪這次,到洋蔥網絡這段了…首先「深網」(The Deep Web)和「暗網」(The Dark Web)是有區別的,「深網」指的是你用一般的搜尋引擎搜不到的那一部分網絡內容——比如你發的每一條朋友圈;「暗網」指的是深網當中的一小部分,一些被刻意從大眾網民視野中隱藏起來、需要特殊瀏覽器(如TOR、Freenet
  • 第三站:學術與美食的誘惑——美帝
    身在美帝,我們把美元叫「刀」(dollar); 問好用「how is it going?」PART 1 —「學」在美帝首先,讓我們回顧下美帝輝煌的學術排名:在美帝上大學,不用面對毛概、馬哲、軍事的折磨,真的爽翻,有沒有!
  • 黑視界:扒一扒暗網「蘿莉塔奴隸玩具」的背後事
    Kuma還是像以往一樣,從故事源頭開始講起,希望大家看完之後能帶著更多思考理性去看待一些所謂的暗網故事,其中還包括人性。因為網站截圖打了碼,當時很多人都不知道該暗網論壇的具體名稱。不過稍晚一點,一個網友回帖聲稱自己找到了這家網站,說看到了裡面的邪惡,並分享了該暗網論壇的某個帖子內容。