城市gdp吧 关注:173,464贴子:13,058,678
  • 10回复贴,共1

华为搜索引擎一直在争分夺秒,台湾媒体digitimes报道

只看楼主收藏回复

華為旨在建立搜尋服務的爬蟲程式引發外國網站經營者不滿。HMS官方Facebook


IP属地:湖南1楼2020-05-19 21:56回复
    近來,一系列來自華為海外子公司的爬蟲程式令外國各個主機的管理者頭痛不已,因為其爬蟲程式常傳出主機正常運作受到影響,這可能與華為正在開發中的華為搜尋有關,而且似乎可以從中感受到華為的時間壓力。
    爬蟲是一種網路行為,其歷史幾乎與網際網路一樣悠久,創立20多年的Google卓越的搜尋服務除了來自於演算法之外,爬蟲也是功不可沒,而各個網站與使用爬蟲的搜尋引擎之間也存在互利共生的關係。
    然而近期一支名為AspiegelBot的爬蟲程式卻令外國許多網站管理者感到為難。近幾個月來,網路上傳出華為爬蟲程式因為高頻截取網站資料而影響網站運作,網路社群也開始分享因應之道,3月時Jason Dotnet分析爬取其伺服器內容的來源排名,第1名是近年來高度活躍的Ahrefs,第2名就是來自華為的Aspiegel,而開發者平台Hypernode更統計,屬於華為在愛爾蘭分公司Aspiegel的1支爬蟲程式,自3月以來爬取頻率更是扶搖直上。


    IP属地:湖南2楼2020-05-19 21:57
    回复
      華為是在2018年將HMS下的用戶資訊包括帳號、雲端服務、遊戲中心及主題轉移至愛爾蘭的Aspiegel,此舉在當時被視為是在海外用戶對華為存疑的情況下、華為爭取用戶信任的策略。目前Aspiegel負責營運HMS的國際版,主要服務華為中國大陸以外的客戶,如今卻傳出來自Aspiegel的爬蟲程式引發許多網站的不滿。
      近年來,由於中美貿易戰影響,華為的產品已許久無法搭載GMS服務,雖然華為與Google雙方都沒有放棄與對方合作的意願,但華為積極發展自有HMS作為因應之道,值得注意的是,外媒於3月也傳出,華為正在開發自有搜尋引擎「華為搜索」,而3月正是華為對外擷取網站頻度開始大幅上升的時期。
      不僅如此,這支SpiegelBot截取網站之積極,若干情況下甚至無視被視為君子協議的Robots協議中所約束的內容,Robots通常以txt形式儲存在主機的最上層目錄,其中User-agent定義搜尋引擎類型,Disallow定義禁止爬取的位址,Allow則定義允許爬取的位址,這份文件無實質約束力,但搜尋引擎仍會予以尊重,以免網站管理者祭出反爬機制,但Spielgel的爬蟲不僅擷取頻率高到形同阻斷服務,也被發現在爬取內容上並未遵守Robots協議。
      一直以來,華為有沒有GMS對華為在中國的運作沒有太大關係,畢竟Google面對中國市場多年來始終不得其門而入,中國用戶用的也是百度搜尋而不是Google,但在華為試圖以自有的HMS走出海外市場時,其生態圈的完整性就大有關係,而其中搜尋服務舉足輕重。


      IP属地:湖南3楼2020-05-19 21:57
      回复
        根據IDC的數據,華為2019年全球2.4億支的智慧型手機出貨中,有1.05億支來自中國市場,中國出貨佔比43.64%,到了2020年第1季,中國出貨佔比升高到57.95%,顯示華為日益依賴中國市場,而這不利於華為維持其世界前三大手機品牌的地位。
        因此,來自華為旗下Aspiegel的爬蟲程式,近幾個月在網路上加速活躍,甚至迫使網站管理者加以反制,或可將之視為與華為正在海外市場建構其搜尋服務能力有關,只是在爬取手段上並未對網站管理者及用戶展現足夠尊重。
        另外,華為也可能是出於時間壓力,而希望及早壯大HMS的實力。余承東此前接受訪問時表示,華為在中國的手機出貨量可望全年成長2~3成,但海外市場仍處於GMS至HMS的過渡階段,要等到下半年HMS拓展效果出現後,海外手機銷量才會好轉。這股時間壓力,想必是主要經營HMS國際版的Aspielgel來承擔。


        IP属地:湖南4楼2020-05-19 21:58
        回复
          我就奇怪了,百度这几年干嘛去了~( ̄▽ ̄~)~


          IP属地:内蒙古来自Android客户端6楼2020-05-20 08:41
          收起回复
            被系统删除了又恢复了,某网站英文名是屏蔽字。


            IP属地:湖南7楼2020-05-20 09:05
            回复
              知乎上对于百度有更深的解读。总结一句话就是。百度不死,不足以平民愤


              IP属地:江苏来自Android客户端8楼2020-05-20 23:54
              回复
                希望华为早点推广。我会一直用华为。这样某度只能自生自灭了


                IP属地:江苏来自Android客户端9楼2020-05-20 23:55
                回复