新京報快訊(記者劉經宇 實習生李強)近日,新京報記者搜索發現一個名為「蘿莉資源」的兒童色情網站,後對其進行舉報。今日(8月28日),記者再次嘗試檢索該網站,發現該論壇已無法進入,頁面顯示「現有連接被遠程主機強行關閉」。
據新京報此前報導,「蘿莉資源」網站自稱「全國最大的蘿莉資源論壇」,實則為兒童色情網站。網站隨處可見「小蘿莉」、「四年級女孩」等字眼。用戶充值成為會員後即可觀看、下載網站內的兒童色情內容。8月24日,記者向12321網絡不良信息與垃圾信息舉報受理中心舉報該網站,隨後記者得到該中心回復稱,會在7日內完成處理工作。
今日上午,記者通過百度、360、搜狗等多個瀏覽器搜索「蘿莉資源」網站,網頁均提示:由於該網站的robots.txt文件存在限制指令(限制搜尋引擎抓取),系統無法提供該頁面的內容。點擊該網站連結,連結跳轉頁面顯示:「An existing connection was forcibly closed by the remote host(現有連接被遠程主機強行關閉)」。
隨後記者在手機上嘗試打開此連結時,頁面提示:網頁包含色情內容,被多人投訴,為維護綠色上網環境,已停止訪問。
記者查詢發現,robots.txt是搜尋引擎訪問網站時查看的第一個文件,這個文件用於指定spider在該網站上的抓取範圍。部分網站由於存在不想被搜尋引擎收錄的內容,會使用robots.txt文件來屏蔽網站的部分內容或者全部內容。若網站對百度spider設置了robots.txt文件,百度會遵循robots協議,不抓取封禁的結果,但考慮到用戶在搜尋引擎中有搜索該網站地址的需求,搜索結果中會根據搜索需求展示網站的標題及網址,但不會顯示網站摘要。