| admin |
|
| 等級：版主 |
| 積分：1786分 |
| 注冊：2004-1-8 |
| 發(fā)貼：521（346主題貼） |
| 登錄：1042 |
|
|
| alexa 網站排名與作弊 |
alexa 作弊，無非那么幾種方式，有人說什么世界排名可以任意設置到任何一名，有人說你的世界排名高了就會怎么怎么樣，其實，做網站，千萬不要陷得太深，不要追求那些不著邊際的東西，互聯網上所有的名站，都是以內容致勝的。但是，沒見過豬跑也不行，中推這里總結一下，大家一起研究，就是不去騙人，總不能讓人家騙了。
1、欺騙型作弊：
這種形勢，就是某些人張揚的，可以隨意提升你的世界排名到任意一位，這種欺騙的方式沒有任何的實際價值和意義，只能讓看到的人恥笑，實現的方式，就是編幾句代碼，讓 alexa 誤認為這是其他的網站，你編程設置為yahoo，你的世界排名就是1
2、代理服務器點擊型作弊：
ALexa Booster、 Ranking Booster 等軟件是這方面的代表，無非人為利用代理服務器增加點擊量 和 PV，在 alexa 經常改變算法并防止作弊的年代，這個落后了，而且，效果不高。
3、破解 Alexa Toolbar型作弊：
這是國內幾個高手在做的事情，他們在電腦上安裝toolbar 之后，用嗅探器嗅探toolbar發(fā)送的網絡數據，發(fā)現并分析 toolbar 向 data.alexa.com 發(fā)送的數據包，數據包都是帶固定參數的，把 toolbar 脫殼并改動里面的二進制代碼，就可以做到想發(fā)什么就發(fā)什么了。破解了toolbar之后，更高的辦法是再做個軟件，利用這個toolbar。這種是中推認為比較牛的方式。
4、黑客入侵，利用肉雞型作弊：
黑掉人家，裝上 toolbar，訪問自己 帶 meta 刷新的頁面，對有大堆肉雞的人來說，他們有優(yōu)勢
5、DIY，設置自動刷新頁面，間隔刷新型：
這種方式就是在單機上裝上toolbar，訪問自己網站或者目標網站帶有自動刷新的頁面，基本上，是作弊的初級階段，至于是否有效，大家試試即可，有很多人反映說這樣會突然讓自己的世界排名數據消失掉一天，因為中推不是amazon，不知道alexa的服務器端的作弊審核算法，所以，不予以評論，總之我們不建議用。
*******************************************************
要想徹底搞清楚Alexa排名是否可信，必須從技術上對Alexa的全球網站流量監(jiān)測進行全面的解剖，當然，Alexa從來沒有公布自己的技術細節(jié)，記者決定“以彼之道，還施彼身”，既然Alexa聲稱其數據來源就是那個工具條，記者決定首先從破解工具條入手。
受記者委托，圈內著名的Web技術專家小林，用了近一個晚上的時間，對Alexa工具條及其向Alexa返回的數據進行了細致的分析，得出了很多寶貴的第一手資料。多年前對Alexa就做過研究的小林認為，最近的這次分析揭示了一些Alexa更隱秘的技術細節(jié)。
小林告訴記者，現在最新版本的Alexa工具條的運作機理與以往沒有太大的改變，每當用戶以裝有Alexa工具條的IE瀏覽器打開新頁面時，Alexa的一臺服務器（data.alexa.com）都會收到加密的數據包，這個數據包中的核心信息就是十幾個參數，這些參數包括當前網頁地址、頁面打開時間、用戶端顯示分辨率、Alexa工具條版本號、該用戶是否為“亞馬遜”的用戶等，其中有一個重要的隱含參數，經小林分析，認為是Alexa為每個已安裝的工具條自動生成的ID號碼，這個號碼應該是全球惟一的。Alexa可以通過這個ID對每個反饋數據包的發(fā)出者進行惟一標識，這是解決PV重復計算問題和防止同一用戶多次刷新作弊的一個重要手段。
小林告訴記者，從目前研究的結果來看，任何一個匯編高手都可以很容易地掌握Alexa工具條返回的數據包中的秘密，如果這個人同時也是一個網絡編程高手，那么要針對Alexa作弊就比較容易了。從記者后來對一位上海的Alexa作弊高手的采訪來看，小林的分析完全正確。該作弊者正是一位資深的Web開發(fā)工程師，其采用的手段與小林的分析也基本吻合——編寫一個Alexa工具條返回碼生成器，批量產生Alexa能夠辨識的代碼串，然后用虛擬多用戶的方式發(fā)回data.alexa.com，這樣就可以欺騙Alexa的服務器，讓它誤以為這些數據是不同用戶發(fā)來的（征得該作弊者本人同意，本專題在最后公開了記者與該作弊者的網上聊天實錄）。
小林認為，這種以編程方式模擬多用戶訪問的作弊方式的實現，最重要的環(huán)節(jié)就在于對那個Alexa用來惟一標識用戶身份的ID號的生成算法的破解，這需要對足夠多的Alexa工具條進行嗅探，抓取其數據包進行定量的算法分析。但小林同時也指出，這些工作對于一個編程高手來說，確實不算什么，只是最終作弊的實現仍需要模擬一個足夠快的ID號生成程序，這可能會比較困難，不過據小林估計，國內能做這些事情的人不在少數，只是互聯網這個圈子里的高手們很少去做罷了。
從以上的技術分析來看，Alexa的服務器每天所做的工作就是不斷接收全球用戶傳回的數據包，提取其中的那十幾個參數并寫入專門的數據庫，然后在某個特定時間對當天收集到的這些數據進行分析計算，并以新的計算結果去更新當日的網站排名。據記者觀察，這個數據庫的分析結果至少會保存三年之久，因為在Alexa網站上對每個網站的Rank排名變化趨勢圖最多能提供三年來的數據變化。
在破解了工具條的DNA之后，記者還與一些朋友探討了Alexa工具條在全球的分布情況。按照Alexa的說法，工具條是它惟一的信息獲取來源，那么工具條在全球用戶中的分布也就成了另一個可以影響Alexa排名的重要因素。如果工具條真的是Alexa數據的惟一來源，可以想象，當中國網民都沒有安裝Alexa工具條的時候，新浪搜狐這樣的門戶網站恐怕在Alexa排名中都見不到影子，可是今年下半年以來，新浪和搜狐就已經緊隨Google排在全球第四和第五的位置了，這似乎說明了Alexa工具條已經在中國具備了較高的普及率，否則，新浪、搜狐以及緊隨其后的占領了Alexa全球500強中近1/3份額的中國網站就都有作弊的嫌疑。
幸好記者的一位朋友曹政提供了令人欣慰的數據。作為網站流量分析專家，曹政在www.tong123.com上為多達2000家國內各...率在1.5％左右。
就在發(fā)稿前，曹政還給記者發(fā)來了對這一結果的補充說明，他認為，由于tong123的系統(tǒng)采用累計平均值的計算方法，Alexa工具條的實際安裝比例應該比現在得到的數據更高，因為這個監(jiān)測項剛加進去不久。
由于tong123.com的監(jiān)測范圍是2000家各類網站，基本上排除了由于監(jiān)測對象較少可能造成的用戶選擇傾向性，其可信度比較高。即使以1.5％這個被低估的安裝率來衡量Alexa在國內用戶中的影響，也已經十分驚人了，若國內互聯網用戶以總數9000萬計算，則其中安裝了Alexa工具條的用戶可能已超過130萬。按照Alexa聲稱的1000萬左右的工具條全球下載總量來看，中國網民對Alexa的熱衷似乎顯得更為突出，這或許也可以作為國內網站今年在Alexa排行榜中整體排名提高的一個解釋。
既然工具條的分布會從很大程度上影響Alexa的監(jiān)測結果，那么Alexa的排行榜就可能出現很大的地域相關性，如果確實如此，Alexa的權威性就真值得懷疑了。事情遠沒有這么簡單，在Alexa網站上，記者看到全球網站前10萬名排行榜的報價是499美元，顯然，在大洋彼岸，還是有人認可Alexa的排名數據，甚至會花錢去買那個排行數據。
在Alexa各種公開的資料或是網友對它的討論中，都沒有人明確提出過Alexa除工具條以外是否還有其他能夠獲取公網流量的監(jiān)測手段，而長期為多個著名網站提供技術支持的小林，通過對這些網站的日志分析，認為Alexa還有很多技術隱私。由于無法得到Alexa的官方回應，我們只好說這些可能被采用的技術手段是“莫須有”的。
為了進一步探尋Alexa的隱私，我們還要先看看Web瀏覽的過程。當用戶打開IE瀏覽器，在地址欄中輸入一串網址并回車后，一些包含了http請求的數據包就被發(fā)送出去，與其他流量一樣，這些數據包也要經過用戶所在內網的網關，被路由到公網，經過一個個電信機房，最終傳送到某個提供DNS解析的服務器上，在獲得目的網址的IP地址后再被放到一個可以最終路由到目的IP的路徑上傳送過去。從http請求的發(fā)送過程來看，如果Alexa對全球所有的DNS解析服務器進行嗅探，將有可能得到一份非常接近事實的全球http請求數據，由此就可以非常清晰地勾勒出哪些網站被哪些用戶所關注。
不過，要嗅探全球的http請求，對Alexa來說幾乎是天方夜譚。退一萬步，即使Alexa能抓取到這些數據，它也不可能有以這些數據為基礎進行計算的能力。但是，Alexa排名所顯示出的一些“抖動”跡象似乎在告訴人們，除工具條之外，Alexa確實有使用其他技術手段的嫌疑。
2004年夏天，小林發(fā)現中國香港的網站排名出現異常的提升，像“太陽報”這樣的小網站，居然能超過很多內地大網站的排名。由于電信網關和簡繁體系統(tǒng)的原因，內地與香港網民一般是不做“跨地區(qū)互訪的”，而香港網民安裝Alexa工具條的絕對數也不會比內地用戶高。從前文的分析和計算來看，內地網民中Alexa工具條的安裝量恐怕比全香港網民的數量都不低，這樣的情況下，香港網站在Alexa排名的普遍大幅度提升就顯得毫無道理。
經過兩個月的高排名期后，香港網站的排名開始逐漸回落，但至今仍有部分網站的排名高出其實際應處的名次。小林認為，這個現象與韓國網站在2003年出現的情況有很大相似性，而韓國的很多網站目前仍有偏高的排名。這種現象如果用Alexa工具條的普及率來解釋是不合情理的，但如果用Alexa增加了其他采樣機的說法來解釋，就很容易說得通。
據小林推斷，Alexa可能在全球不同地方設置了一些采樣機，通過與一些電信機構進行或明或暗的合作，甚至在臨近電信網關的節(jié)點進行網絡嗅探，得到一些“彌補性”的采樣數據。而尋求這些采樣數據的目的恰恰是為了照顧Alexa所認為的“工具條低安裝率”地區(qū)的抽樣效果。打個比方，如果Alexa認為韓國互聯網已經非常普及，而韓國用戶卻一直沒有安裝Alexa工具條的習慣，它就可能會設法在韓國安插一些采樣機，以彌補在韓國用工具條采樣的不足。同樣的情況，也可能導致香港在剛剛設置采樣機時網站排名的猛增。而經過一段時間的考察，Alexa就會逐步調整在每個地區(qū)的采樣數量，以得到它所認為的最合理的結果。
甚至小林還認為，今年內地網站排名的大規(guī)模提升也有采樣機在作怪，而國慶后內地網站排名的普遍下降也許就是因為Alexa在經過一年的考察后，重新調整了在中國內地采樣比重的結果。
當然，Alexa要維護其排名的權威性和公正性，不僅要完善流量數據的采樣過程，更要在防止作弊方面做出巨大努力，那些防作弊的技術也都是Alexa的不宣之秘。那么Alexa到底是用什么辦法來防止作弊呢？事實上，對于前文中記者提到的以編程模擬Alexa工具條返回數據包的作弊方式，Alexa幾乎沒什么好辦法去防范，甚至要探測到這樣的作弊手段都比較難。
其實，對于現在網上常見的作弊手段，Alexa都已經有了足夠的免疫力。一般來說，由于現在多數搜索引擎都無法處理JS腳本，所以針對搜索引擎的作弊往往都是用JS腳本編寫惡意代碼來實現，而Alexa和Google采用的爬行程序則是目前僅有的可識別JS腳本的此類程序。
小林在對幾個大型網站的流量監(jiān)測中發(fā)現，Alexa啟用了一個叫做IA_Archiver的機器人程序，這個機器人程序類似Google等搜索引擎使用的蜘蛛程序，專門在互聯網上爬行，刺探每個Web頁面的流量信息。尤其是當某個網站的流量超過Alexa設定的閾值時，IA_Archiver就會馬上爬到該網站的服務器上，分析此網站的流量是否正常，有沒有作弊行為。據小林對IA_Archiver的監(jiān)測，該機器人程序已經可以識別大部分基于網站服務器端的流量作弊行為。但現在業(yè)內對IA_Archiver的認知普遍不足，記者也只是在Alexa網站的一個幫助頁面上看到有關IA_Archiver機器人程序的簡單介紹，而國內知道這個機器人程序的人不多，更缺乏相關的技術研究。
信任Alexa？
針對Alexa排名的可信度，不同的人有不同的看法，從事Web技術研究與應用的業(yè)內人士多傾向于這樣一個說法：Alexa排名不一定是絕對準確的，但卻是相對可信的。下面記者舉出的一些例子，將從不同方面對Alexa排名的可信度進行對比。
必須承認，盡管Alexa用很多技術手段提高了網站流量監(jiān)測數據的有效性，但由于其固有的一些技術上的瑕疵，難免使少數網站的排名結果出現一些問題，盡管這些問題在很大程度上要歸咎于網站域名結構的不合理性。
比如，Alexa排名是針對URL地址的，并沒有考慮IP地址的因素，這在很大程度上降低了Alexa排名計算的難度，但是也不可避免地產生了偏差。一般而言，Alexa只對二級域名感興趣，而針對三級域名的流量都被納入了上一級域名的統(tǒng)計，對于比較規(guī)范的大型網站而言，這是完全正確的策略，但是對于一個向不同用戶分發(fā)了三級域名的網站來說，它的流量統(tǒng)計是否應該將所有的子用戶的流量加起來呢？這顯然要因情況而異，一個很明顯的此類不合理統(tǒng)計的例子就是cninfo.net，相信國內老網民都還記得這個域名后綴，這是全國各省市公眾信息港通用的二級域名，比如，sh.cninfo.net和gd.cninfo.net分別是上海和廣東的兩個網站，而Alexa則將其統(tǒng)一算做www.cninfo.net的子域。于是，www.cni... 對于Alexa排名可信度的另一種質疑來自不同類型網站的流量特征的巨大差異性。比如，門戶網站與專業(yè)網站或專業(yè)論壇的流量就幾乎沒有可比性，因為不同類型的用戶在不同時間不同場合訪問不同類型的網站時，其瀏覽習慣會有極大的差異。
即使兩個網站按照Alexa算法得出的綜合流量評估值完全相同，那也不能把兩個網站的影響力劃等號。比如，一個Reach值為1000，PV值為1的網站與一個Reach值為100，PV值為10的網站的Rank應該是相同的，但大部分情況下，后者的內容會比前者更有價值。因為瀏覽前一個網站的用戶都是只看了一個頁面就走掉了，說明該網站可能沒什么吸引力；而后一個網站的用戶平均要看十個頁面才會離開，這些用戶都很認可該網站的內容。當然，更極端的情況也會出現，比如前者只有一個頁面，但該頁面內容非常豐富，而后者的每個頁面內容都很少，或是給用戶設置了很多不必要的跳轉，甚至后者也可能就是一個小說連載站。
這些復雜情況的存在讓人很難相信Alexa可以只用Reach和PV這兩個值就把所有互聯網上的站點劃分出三六九等。不過，如果我們換一個角度來看Alexa，就會發(fā)現它的存在也是有理由的，甚至也可能是確實值得網民信賴的。
如果我們只把Alexa當做一個流量分析服務工具，它的價值就凸現出來了。Alexa網站上提供了非常直觀的流量變化趨勢統(tǒng)計圖功能，這在其他很多情況下是要付費才能獲得的服務，而Alexa只是將其作為免費的公眾服務。
圖1是Alexa上提供的計世網（ccw.com.cn）一年來的流量排名（Rank）走勢圖，從圖上可以清晰地看出，該網站2003年11月3日～2004年11月3日的排名從7500名左右上升到2000名以內，而其中三次非常突然的下降曲線所對應的日期分別是春節(jié)、五一、十一這三次長假。眾所周知，計世網的用戶主要集中在IT行業(yè)中，這三次長假導致的下降曲線非常忠實地記錄下當時的網民瀏覽情況——因為放假，大多數用戶去旅游或在家休息，上網用戶大大減少，所以流量降低，網站的排名也隨之降低。而長假過后，IT人回到單位，頭一天上班總會想到網上去看看業(yè)界的最新資訊。所以長假之后，ccw.com.cn的流量反而都比放假前有不同程度的提升，反映在Rank曲線上，就是三個大的波谷之后曲線高度的恢復與持續(xù)攀升。
事實上，如果能夠詳細分析網站流量變化的趨勢，人們也可以分辨出那些作弊的網站，因為作弊網站流量的變化往往是非正常的，其與正常網站的流量變化曲線肯定有不同之處。圖2和圖3分別是265.com和dsdiy.com的半年來的流量排名趨勢變化圖，265.com是國內著名的網址導航站，最近半年的全球排名一直穩(wěn)定在70～120名以內。反觀dsdiy.com的Rank變化曲線就頗值得懷疑，9月的第一周，該網站的排名就從全球10萬名之外一躍至200名左右，其后的一個月內，該網站的排名一直在100～400名之間徘徊，而就在國慶長假的第一天，該網站的排名竟然躥升至30名左右，到了10月的第二周，該網站的排名又迅速回落至10萬名開外，在Rank曲線圖上再也看不到了，擁有類似排名曲線的網站還有sinapet.com和haohz.com等等。
作為Web訪問情況的監(jiān)測工具，Alexa在記錄了網站的真實訪問量的同時，也同樣記錄了那些作弊網站的流量變化情況。從這個意義上說，Alexa顯然也是可信的，關鍵是我們選擇的視角必須能恰到好處地發(fā)揮Alexa的作用。
無論出于什么樣的目的，人們出賣Alexa總是希望能從中得到利益，對Alexa的研究越深入，對Alexa的價值理解得越深刻，就越能從中獲益。
|
|
