Linux, 工作, 生活, 家人

Network

[驚] 丁丁級的部落格供應商測試報告 — 踢爆丁丁測試內幕

第一次看到 台灣10大部落格供應商誰最快?尖峰時段完整測試報告
本來想說這根本就是一個丁丁級測試, 所以沒有放在心上.
一直到從 None 那邊看到 從國外網路可以測部落格供應商誰最快?O.o
中這位仁兄的回應

謝謝你的引用和質疑,因為回應區不好貼圖,我另寫了一篤:http://www.wretch.cc/blog/billypan101&article_id=9160588
回答你的問題。

我的結論是這樣的測試不但準,而且準的不得了。Internet Supervison的方法自有他們的商業機密,他們的數值是經過計算的。

激勵我寫這一篇文章
我只是想說, 那一篇文章根本就是在胡寫

首先,

1. 我們並不知道 http://internetsupervision.com 到底是整個 Blog 的 Page 都抓, 還是會不會連到外面
2. 我們並不知道 Internet Supervison Released 給大家用的到底有多準確.

在這二個大前提都是大變因的狀況之下, 怎麼還敢大聲講呢?

再來我找一下這位丁丁級的仁兄測試的 WebPage.

我再怎麼測 pixnet就是比較慢,這是我剛的結果:

Results for http://blog.pixnet.net/post/izslee/4602917(Pixnet 今
天的首頁挑出來的)
平均77.1
Results for
http://blog.pixnet.net/post/lonely940812/4409350(Pixnet今天的首
頁挑出來的)
平均200
Results for http://www.wretch.cc/blog/marriongao(無名一般會員)
平均272.2
Results for http://www.wretch.cc/blog/wenny0426(無名一般會員)
平均317.3

我測我自已(我是無名的VIP),竟高到324.3!

pixnet兩個和/無名兩個一般會員的和=0.47,還是一半都不到。
(計算用的數值在http:
//farm1.static.flickr.com/221/500611483_6ba2edd486.jpg?v=0)

我想我這句話並沒有說錯。但你講的也有道理,我用「騙」這個字的語氣
可能太傷人了,所以我決定把這句話刪掉。造成你的困擾,我也致歉。

先來看看這個網頁的組成.
我們用 FireBug 做為我們測試的基準, 因為可以看到每一個檔案的讀取狀況
(可以參考大神的用 Firebug 看頁面讀取狀況)http://blog.pixnet.net/post/izslee/4602917 (點進去可以看大圖)

SPEED-1
速度 4.35 秒. 總共下載 1.47MB

http://blog.pixnet.net/post/lonely940812/4409350
SPEED2-2
速度 17.025 秒, 下載 5.37MB
但是各位請注意, 這一個網站還有外連到 zooomr.com 去下載東西.

http://www.wretch.cc/blog/wenny0426
SPEED4-4

286KB 速度 1.62 秒.

http://www.wretch.cc/blog/marriongao
SPEED3-4
493KB 7.8 秒

看到問題了嗎?

這些網站檔案大小都不一樣, 速度當然也不一樣.

再從 NONE 那邊偷圖來用(介意我再拿下來 ^^)
看到一個奇怪的數據了嗎? 同一個網站 KBytes

internetsupervision_for_isp

這邊到 www.hinet.net 才抓了 35K 的資料
但是我們用 FireBug 去讀取, 卻有 370K
SPEED5

結論:
我這一篇不是要比較那一家 ISP 比較快, 只是我看不下去了,
這種丁丁測試法也可以大行其道

我們做測試時, 會儘量控制測試變因, 減少測試因素
以 ISP 服務測試為例:
就算沒有辦法進機房, 也要在同一個 ISP 下.
接下來就是至少準備二篇相同大小的 Blog 文章.
圖和文字都是使用該 ISP 內的.
這樣比較才比較準(或許還有更好的方法)

隨便測試二下就可以說誰比較準, 難道我們大家都是笨蛋嗎!!!!

24 留言

  1. 普天下的丁丁常覺得別人才是丁丁…

  2. 我是原作者,我想你誤解了,那個站的測試是抓前50K的資料,不是整個頁面都抓。
    而它在測試結果中,會把前1K的資料秀出來,一般是原網頁html檔的檔頭。

    請好好把所有的文章和回應讀完,再說別人是不是『胡寫』

  3. 文章作者的留言

    richliu

    我的重點是, 你的測試根本是有問題的測試

    就算照你所說,
    這 50K 是誰產生出來的, 是 .css .js 還是 .html 或是 jpeg?
    如果只是 .css .js , 那你還沒有得到 .html 說不定就結束了.
    這 50K 是不是你能控制的條件?
    你這個測試那來的準? 還準得不得了?

    你不過就是拿一堆數據佐證一個結果, 得到一個結論無名小站是最好的,
    我只質疑你的結論有問題.

  4. 不管是 .html .jpeg . css .js ,在50k的範圍內都還在原站台裏。網路資料流拆開是零與一,基本上什麼副檔名傳輸速度都一樣快的。其實,html, css, js都是文字檔,你不知道嗎?你質疑這幾個檔傳輸速度會不一樣,不太專業。

    你質疑我的數據不對,那你應該拿出正確的數據,才能說我是對還是錯。 None提出的數據,他沒有算,我幫他算的結果是証明我的方法『準,還準得不得了』(因為有TWNIC的數字佐証。)

    我沒有測試以前,我完全不知道無名最快(我沒說他最好)。我也和無名的人一點關係都沒有。我沒有預設立場,也沒有對數據資料做任何更改。

    但你自問,你有沒有預設立場呢?

  5. maniac

    我不知道你”算出了什麼”就很自豪的說你其它的東西就是準的要命
    以平均來說, 各個 ISP 表現出的對外頻寬比例就是他們買的對外頻寬比
    看出了這點, 只能說他們沒有灌水之外, 有什麼特別可以驕傲的嗎?
    可以佐證其它資料所呈現出來的”結論”是正確的嗎?
    (看, 這個結果證實了 1+1=2, 所以我說 2+2=5 是正確的…)

    再來, 不管 .html, .jpg, .css, 你能保證 server 吐出來的速度都是一個樣?
    拿無名來說, .jpg, .css 是由 pic 系列的 server 吐出來的
    .html… 這東西”純html檔”有但是我相信不算十分的多, 大多數的 request 都是 .php
    為了組出 html, 你以為不用去後端的 db 查詢就可以直接吐給你?
    做了查詢還能像 .jpg, .css 那種本來就在硬碟裡直接讀出來的 server 還要來的快?
    打死我都不相信, 也不用說很多常用的就乾脆丟記憶體裡的東西, 連去硬碟讀都不用的內容
    這種吐出來速度你相信它是一樣的?
    (哦, 抱歉我不拿出數據, 因為常理就可以判斷的東西去測數據只是浪費我時間)

    其它的, 我懶的補充了, 時間也不早了, 早一點睡對身體比較好…

  6. carloschen

    不講client,即使頻寬都一樣,人數一樣,server每台loading應該都不盡相同,這會影響下載(讀取)檔案的速度,有哪些loading,除了硬體之外,每種os,軟體,設定等特性也會影響,maniac大致上都講了.

  7. 你還是不用功,我寫的不是『各個 ISP 表現出的對外頻寬比例就是他們買的對外頻寬比』,是『國內連線總頻寬』。

    我指的是html, js, jpeg, css傳輸時是一樣的。產生時不一樣,算在機器的反應時間裏,越快的機器產生越快,測試結果當然更好。html的查詢等待時間,每一家站台都要,而且是先做,這耗時在50k的傳輸耗時之前,之後才知道js, css, jpeg要呼叫那裏。,這裏面沒有比例原則的不公平,你再仔細想想就會想通了。

    你先弄錯50K的網頁問題(還畫了一堆圖),誤會html, js, jpeg, css,最後又搞不清楚『國內連線總頻寬』…

    哎,你懶,就不要隨便罵人。

  8. BrianHsu

    基本上這種測試只要有網路和 OS 基礎加上統計的人,應該都不會相信他有多『準』。

    更別說:
    ======
    如果是用國外這個站台測,(1)和(2)的誤差就差不多了,因為你在台灣,
    用hinet測xuite等於抄近路,測別家就遠,但在國外就沒這個差別。這樣
    才能去比(3)啊。
    =====

    這種笑話了。:p

    學過網路的人我看沒人會相信這種鬼話,網路環境有多少變數啊!同樣目的地的 request 每一次都還不一定走同一條路咧……

  9. 匿名訪客

    To BrianHsu:

    學過網路的人沒人會相信?那你的意思是http://internetsupervision.com/這家公司在騙人?

    他們的10個測試站台在全世界,換句話說,不管要測那一個網站的速度,在美國,英國,日本,都是同樣的測試原則,都是『國內測國外』,也都要面對網路環境的多變數。

  10. To BrianHsu:

    學過網路的人沒人會相信?那你的意思是http://internetsupervision.com/這家公司在騙人?

    他們的10個測試站台在全世界,換句話說,不管要測那一個網站的速度,在美國,英國,日本,都是同樣的測試原則,都是『國內測國外』,也都要面對網路環境的多變數。

    人家靠他們的知識和技術得到許多公司的信賴在賺錢,推出線上免費測速的功能是行銷也是他們的招牌。沒有一定的公信力他們敢這麼做嗎?他們公司有多少專精網路的工程師會不了解你的問題?你自已一知半解就說別人是『鬼話』,未免太自我膨脹了。

  11. jsli

    某些網站愈來愈得不到別人的信賴,說的話愈來愈沒有公信力,一樣在作生意啊,有什麼好不敢的?

  12. maniac

    我開始好奇他到底把多少人認為是同一個人了… 至少我和有錢劉大大是兩個人 :p
    “還是”不用功? 我記得不管在哪裡我回這個議題全部加起來才一次, 居然可以用到”還”讓我嚇了一跳
    算了, 這不是重點

    不要管網路, 拿一個比較類似的例子-股巿來說好了
    看到這個時間點 A 股票在漲, B 股票在跌, 就可以說買 A 一定會賺, 買 B 一定會跌嗎?

    看不懂這個比喻就算了, 我也無所謂 :p

  13. 文章作者的留言

    richliu

    To billypan101:
    你到現在還搞不清楚嗎?
    就算 http://internetsupervision.com/ 再怎麼有公信力.
    但是不表示你的測試方式及理論是正確的.

    1. 待測對象網頁大小不一致?
    2. 如果只抓取同樣大小的資料, 如何能得知 ISP 實際的速度?
    3. Response Time 如何得知?

    你不過就是拿些數據, 湊成一個結果.
    電腦相關科系都學過一個單字 GIGO(Garbage In Garbage Out),
    用來說明你的例子剛剛好.

  14. To jsli:
    希望你寫的不是在指我。我和無名公司無關,我只是個人使用者而已,『公信力』??

    To maniac:
    我指的是你段有把所有的回應看完,『還』是和別人一樣誤解。
    我測了幾個時間點?為何挑那些時間點?請你再看一下。

    To richliu:

    不知道是誰才在GIGO,哎。

    1,我已經回答很多次了,這麼簡單的問題,別人會沒想到嗎?
    2,我不知道你在問什麼,你應該試試seednet或hinet的測速頁面,就知道他們都是這樣做的。(“抓取同樣大小的資料”,不過這是isp,詳細原理和我的測試有些不同)
    3,Response Time 要得知更簡單,數學式子你不會去算嗎? FT=RT TT,第一個bit到第50k bit間就是TT,這很難嗎?

    為何我等了這麼久,都沒有人用不同的方法去做BSP的完整的測速報告?只是隨便說我方法不對,就說這結果不準?還是有人去測了,結果發現我沒有錯,就不敢寫出來?或是找不到比我更好的方法呢?

    台灣的部落客,就這麼點打嘴炮的能耐和水準嗎?裝高姿態吐吐情緒化的口水,Garbage In Garbage Out,是在說明誰啊?

  15. hiroshi yui

    http://spreadsheets.google.com/pub?key=pzeMrvrpL7SCqcKMSTX23Ig

    ┐(´〜`;)┌

    (↑請想像成是御劍檢事在作「無可奈何」)

  16. eyes

    看到這裏我大概有點瞭解了
    一個不嚴密的測試方法 過少的測試次數 大公司的背光效應(或稱光環效應)=自以為是的鐵口直斷

    科學的進步來自於質疑,來自於實證,
    沒有哥白尼質疑權威的日心說,沒有伽利略用望遠鏡觀測支持哥白尼的學說,這世界恐怕沒有進步這麼快

    其實做出來的結果和大公司的相同與否並不重要,畢竟實驗方法.設備.環境…..都不盡相同,
    重要的是嚴謹,因為大家都看得到這一點,所以才有這一長串的討論

    因此一昧的強調自己的結果與大公司的相同,看起來很不明智哪!!!因為大家在意的重點不在那裏

    再悄悄的問一句”依附權威真的這麼爽嗎???”

  17. hiroshi yui提出了他測試的數據,雖然和我的不一樣,不過我肯定他實証的精神。

    這樣也才能討論下去,不是嗎?

    對hiroshi yui,我覺得有些眼熟,很像是去開每個站台,服務首頁得到的數據。

    因為他未標明測試的是各站台的那個頁面,所以我這樣猜測。我自已是使用隨機挑選的個人部落格。為何不用服務首頁而用個人部落格,原因我也在文章中提過了。

    和我測試的結果不一樣,我猜也許是因為這個原因。

    另外,如果網友可以提出不同的測試方法和工具,我也會很樂意學習後自已再重覆做一遍。

  18. walkman

    怪了, 某站還在 giga 的時候老是在靠夭說 hinet 對接水管不夠大的虐待 ISP.
    現在換個東家後雞犬升天搬到 hinet 去就有人跑出來說某站最快…
    這會不會操弄得太明顯了?

    好笑咧, 從國外連是你無聊皮癢去測的, 我從國內連頁面出來的就是慢嘛…. -_-

  19. hiroshi yui

    billypan101,

    你猜錯了,
    我除了 wretch 那邊改測 http://www.wretch.cc/blog/libnews,
    其餘都與你原始列的九個 blog URL 一樣。

    http://img474.imageshack.us/my.php?image=screenshot2636031844316zd0.png

    我一直留餘地給你,
    一直暗示說「只要你多次、密集去測,你就會發現你這整個測試有什麼問題」,
    但是很遺憾,你不但不肯勞動你貴手去測得這些數據的不穩定性,
    還反過來說別人:

    「為何我等了這麼久,都沒有人用不同的方法去做BSP的完整的測速報告?只是隨便說我方法不對,就說這結果不準?還是有人去測了,結果發現我沒有錯,就不敢寫出來?或是找不到比我更好的方法呢?」

    事到如今,
    我只好依循大哥你的測試環境,
    去做你始終聽不進去的「多次」、「密集」測試,讓你求仁得仁。

    結果就如 maniac 長輩的譬喻:

    「不要管網路, 拿一個比較類似的例子-股巿來說好了
    看到這個時間點 A 股票在漲, B 股票在跌, 就可以說買 A 一定會賺, 買 B 一定會跌嗎?」

  20. To hiroshi yui:

    我本來就不止測試一次,自已看沒有公佈的數據,我也覺得數據並沒有太大的不穩定。但是我覺得奇怪,你怎麼能在還沒有進行你的測試之前,就那麼肯定我的測試結果一定是錯的呢?

    不過至少你願意去測一次,我已經很感謝你了。就算結果不一樣,我也尊重你的結論,我不會再去猜測差異出現的成因。

    To walkman:

    『操弄』?不要有被害妄想了,我只是個普通的user。

    我在國內連它就是快,所以雖然有其它BSP的帳號,我只用它的服務。我用腳投票。

    To PowerOP:
    謝謝你專業的說明和指正。雖然後面還kuso一下丁丁,不過我已經很習慣了…:-)

  21. maniac

    只看幾個點你就可以推出所有的結論? 比方說我給你兩個點, (0, 0), (1, 1), 然後要你寫出我心中的 f(x, y)=0 裡的 f 型式, 你想你能答對的機率會有多少? 更何況變數更多的網路了, 真的以為那一票研究者為了逼近網路的實況所建構出那麼多模型只是笨蛋嗎? 更不用說為了求證模型合理性而下去跑模擬了

    至於肯定你的測試結果一定”有”錯的理由, 很簡單, 你把問題太簡化了, 簡化到根本忽略了網路的情況, 你的問題我換個方式來說: 今天我要測試幾家店的珍珠奶茶製作速度, 選了幾家: 台北車站的A店, 台中某個小巷子的B店, 南投深山裡的C店, 墾丁的D店, 花蓮的E店, 然後我在全球選了幾個地點出發並且按下碼錶, 等到我買到珍珠奶茶再回到原出發點再按一次碼錶, 所得的時間就是”相對的製作速度”, 加起來平均一下就可以比較了…
    真的能這樣比嗎?

    當然你還是堅持我沒意見, 畢竟不關我的事, 要教你到懂更不是我的義務, 至於無名嘛… 該恭禧你的使用經驗良好啊…

    還有那個那個… 我不是長輩啊~~~

1 則自動引用通知

  1. 帝國反抗君 - PowerOp

發佈留言