Navic v metodice chybi jeden podstatny udaj a sice z ktereho AS bude mereni probihat (ze by AS24930 ?) - zda-li z nekolika, centralne apod. - vysledky mohou byt velmi zkreslene, protoze jak vsichni vime, tak Lupa (81.31.5.63/26) aktualne hostuje u CECOM Czech, u nehoz uprimne asi neni majoritni vetsina ceskych uzivatelu Internetu... a tedy zalezi na kvalite peeringu mezi CECOMem a ostatnimi ISP, naopak si myslim, ze peering jinych ISP s vlastnim AS navzajem je na lepsi urovni...:-)
Posledniho planovaneho (vime, jak casto plany a sliby konci) ISP (z TOP5) jsi zatim nezverejnil, tudiz se da konstatovat, ze i pri naplneni veskerych planu ma wAudit nanejvis dva solidni merici body.
Co vice, domnivam se, ze wAudit bude v konecnem dusledku spise produkovat vysledky vypadku peeringovych linek do NIX.CZ jednotlivych poskytovatelu nez dostupnost aplikacnich sluzeb ASP - tedy to, co si dal do vinku wAudit.
Mohu zodpovedne rici, ze z praxe znam dost ISP, kterym treba vypadne linka do NIXu, ale zakaznici to v podstate nezjisti, pokud nechteji pristupovat na stroje, ktere maji 'jediny' routing via NIX.CZ a vse ostatni jim "funguje". Z posledni doby je takovym "unikatem" treba ISP Ceske Readiokomunikace, vypadky linky z/do NIXu jsou naprosto na dennim poradku - ale to by prece Michal jako clen dozorci rady (?) NIX.CZ mel vedet daleko lepe, nez my bezni smrtelnici odkazani na par beznemu cloveku nic nerikajicich grafu na www.nix.cz - myslim si, ze je vice nez zrejme, proc se i velci "cesti" ISP boji zverejnit podrobne statistiky, protoze by se ukazalo, jak to s tou "profesionalitou" ve skutecnosti je a marketingove se to blbe zakryva...
Je pravdou, ze kvalita ASP se da merit i jeho vlastnim vyberem svych dodavatelu - zde napr. ISP (pokud neni zaroven ISP + ASP), ale tim padem ve skutecnosti wAudit produkuje trochu jine vysledky, nez prezentuje - a to je berna mince me kritiky.
Muzes mi prosim vysvetlit, jak chces bez podpurnych prostredku (a musely by byt dostupne po cele virtualni trase (coz vzhledem ke zpusobu dopravy - bunkove/packetove je dalsi zajimavy problem)) na "aplikacni" vrstve alespon detekovat problemy vrstvev nizsich tak, abys skutecne mohl zodpovedne rici, ze problem neni nedostupnost sluzby (tedy to co meris), ale prenosove trasy - treba jak na svinu se "rozpadl" BGP routing ISP Tveho mericiho bodu...
Muzes mit pravdu v tom, ze lide, kterym je wAudit urcen vlastne vubec nevedi o com to celou dobu mluvim, nezajima je to a technicke podhoubi fungovani Internetu je nezasahlo - proste a jednoduse pro ne ten server nefunguje a basta - problem ale je, ze to nemusi byt ani za spicku nehtu vina/chyba ASP (a hodne ceskych WebHosteru nejsou zaroven ISP) a presto bude krute penalizovan jen z duvodu Vaseho vyberu mericich bodu a kvalite technickeho osazenstva techto v konecnem poctu 4 ISP...
Jo kdyby byla merici sonda alespon v kazdem AS, je to o dost necem jinem, ale to jde do penez a zrejme v CR neni dost 'zakazniku', kteri by tato data potrebovala ci je vubec chtela (zaplatit).
Nerikam, ze podobna sluzba je na ceskem trhu nezajimava, bohuzel ale bude produkovat vysledky, ktere se v konecnem dusledku mohou obratit vudci WebHosterum a neposkytnou naprosto zadna relevantni data o tom, co wAudit tvrdi, ze poskytuje...
2. Nepochopil jste vsak pointu tohoto odstavce - vy totiz nejste schopni rigorozne zjistit/stanovit (bavime se nad velmi exaktnimi cisly a presnosti v minutach - aspon takovou granularitu zatim prezentujete ve vysledcich), zda-li vypadek je na strane ISP, ktery poskytuje ASP konektivitu (pak je to tak jak rikate Vy) nebo na strane Vaseho ISP, ktery poskytuje konektivitu Vam pro merici bod... - takze budete NEOPRAVNENE penalizovat WebHostera, ackoli na jeho strane (a jeho ISP) je vse OK, problem je v tom, ze zakaznici si vybrali neschopneho ISP... (a ze techto pseudo-ISP na ceskem trhu je stale dost...)
WebHostera zajima jeho ISP, tezko jakkoli (i treba vyberem) ovlivni vypadky mezi jednotlivymi ISP a rychlost jejich reseni (neni to asi soucasti SLA (IMHO maximalne NIX.CZ, outside (zahranici))) - proc v tomto pripade ma byt penalizovany WebHoster, kdyz to neni chyba ani jeho ani jeho ISP?
První případe je zřejmě bez diskuse, pokud nefunguje server, logicky zaznamenáme výpadek. Druhý už si debatu zaslouží: výpadek totiž zaznamenáme i v případě, že server běží, ale zvenčí se k němu nedá dostat. Webhoster je v tom zdánlivě nevinně - proto jsme původně zvažovali možnost v tomto případě výpadek nehlásit. Nakonec jsme ale došli k závěru, že výběr kvalitního ISP je součástí odpovědnosti webhostera. Z hlediska zákazníka je podstatné jen to, zda se dá na jeho stránky dostat. Pokud ne, není důležité, kde se pakety zastavily - webhoster to má zkrátka zařídit tak, aby k takové situaci nedošlo.
Jediná možnost, kdy bychom mohli zaznamenat výpadek nesprávně, je tedy bod číslo 3. Podle mého názoru je velmi nepravděpodobné, že by nastala situace, kdy by nezávisle na sobě vypadla konektivita dvěma bodům najednou, nicméně stát se to může. Pro takový případ jsou k dispozici kontrolní mechanismy. Především je to podrobný přehled výpadků včetně záznamu o všech odeslaných paketech, traceroutů apod., z nichž je možné zjistit, kde došlo k chybě, a případně rozhodnout, že o výpadek nešlo. Tento přehled má v neveřejné sekci k dispozici každý z účastníků a jsem si jistý, že kdyby k nějakému neoprávněnému hlášení výpadku došlo, okamžitě by se ohradil. Výpadek by se navíc v takovém případě objevil u všech účastníků, což by samo o sobě jistě vypadalo podezřele.
Na okraj je třeba říci, že má za sebou wAudit několik měsíců pilotního provozu, během nichž k žádné podobné situaci ani ke zpochybnění výsledků ze strany účastníků nedošlo.
Rovnez ja bod 1 povazuji za zrejmy a jasny. Bod 2 je diskutabilni - pohled na vec (tedy metodiku) jsem nenasel v pravidlech hry... Rovnez reseni a metodiky bodu 3 jsem nikde nenasel...
K tem pripadum bych pridal jeste 4., ktery jsem empiricky mnohokrat (bohuzel) vypozoroval... - a sice nefunguje konektivita (at prima ci via NIX.CZ) mezi ISP mericiho bodu a ISP mereneho ASP (ackoli jinak oba ISP bez problemu funguji - vcetne zakazniku) - do kontrol teda povazuji za vhodne/nutne dat nejen kontrolu vypadku "konektivity" mericiho bodu, ale rovnez tento stav - vypadek u vsech merenych serveru u jednoho AS ci ISP.
K pilotu bych poznamenal jen to, ze jste merili velmi exponovane hostingy, ktere maji IMHO i specialne osefovane ISP (tim nemyslim LSA mezi ISP a ASP, to svedci o kvalite, ale to, ze ISP se 'nadstandardne' snazi prave proto, ze hostuje toho ASP), protoze jde o jejich prestiz a obhospodareni VIP - v teto pozici je velmi malo WebHosteru (tedy tech, ktere IMHO chcete hlavne merit, aby se zakaznici vyznali) - navic jejich pocet a struktura naznacuje, ze spoustu detskych nemoci jste nemohli zachytit z duvodu vyberu vzorku...
Mohu zodpovedne rici, ze z praxe znam dost ISP, kterym treba vypadne linka do NIXu, ale zakaznici to v podstate nezjisti, pokud nechteji pristupovat na stroje, ktere maji 'jediny' routing via NIX.CZ a vse ostatni jim "funguje". Z posledni doby je takovym "unikatem" treba ISP Ceske Readiokomunikace, vypadky linky z/do NIXu jsou naprosto na dennim poradku - ale to by prece Michal jako clen dozorci rady (?) NIX.CZ mel vedet daleko lepe, nez my bezni smrtelnici odkazani na par beznemu cloveku nic nerikajicich grafu na www.nix.cz - myslim si, ze je vice nez zrejme, proc se i velci "cesti" ISP boji zverejnit podrobne statistiky, protoze by se ukazalo, jak to s tou "profesionalitou" ve skutecnosti je a marketingove se to blbe zakryva...
Moje clenstvi v predstavenstvu NIXu nijak nesouvisi s wAuditem. Na tomto projektu jsem se nijak nepodilel (ani vyberem ISP) a precetl jsem si o nem az vcera v redakcnim systemu. I v pripade, ze bych se na projektu podilel, moje mandatni smlouva (i obchodni zakonik) mi zakazuje interni informace poustet ven (uz vubec nezminuju na etiku). Jinak Tve hodnoceni ISP povazuju za prilis zjednodusujici.
Nemyslim, ze by NIX.CZ mel poskytovat detailni statistiky pripojek clenu. Paklize to clenove seznaji za vhodne, meli by je publikovat sami (kazda linka ma dva konce). NIX.CZ navic provozuje pouze L2 infrastrukturu, takze v pripade, ze pripojka poskytovatele bezi, ale ma nejake potize s BGP smerovanim, nelze to prostredky NIX.CZ zjistit.
Jinak mam dojem, ze cely wAudit je skutecne udelan velmi levne :-) Druha pravda je, ze nejlepsi rozumne udelany levny model spociva v tom, ze sondu umistim ke KAZDEMU merenemu subjektu.
Pokud se tyce vypadku ISP nejake sondy, pak pokud jde o vypadek generalni, pak se projevi vsude stejne, paklize pujde napriklad o spadlou BGP session mezi dvema, pak je to i tom, ze si ICP mohl vybrat ISP s rychlejsim systemem reseni problemu :-) Hodnoceni ICP je komplexni cinnost a krome toho, jak rychle servery ci jaky OS si poridili, musis hodnotit taky jejich schopnost resit problemy, jejich vyber ISP a kapacitu, kterou si nakupuji ...
Clenove NIX.CZ to neseznaji za vhodne, protoze pak by mozna i pozice na trhu byla dost jina...:-)
Udelan velmi levne take znamena modelace idealniho prostredi, kterym dynamicky Internet vubec neni, problemy nikdy nenastanou v hladkem prubehu, ale v hranicnich pripadech - jejich vagni definice/metodika mne silne udivuje - ovsem po aferach s 'merenim' nastevnosti Web serveru je to jaxi cesky kolorit, ze exaktni cisla lze vykladat na tisic zpusobu a vsichni maji nenapadnutelnou pravdu...
Co se tyce, jak ty nazyvas ICP (budiz) a jejich vyber ISP - to je ale polovina linky (vcetne poloviny linky merici sonda vs. ICP, vcetne poloviny linky zakaznik vs. ICP) - co ta druha? A uprimne, kdybych se s tim v praxi kazdou chvili nesetkaval (zkusenosti se zahranicim v teto pozici nemam, mohu mluvit pouze o "ceskych" propojkach), tak by mne to ani nenapadlo, bohuzel sektavam se s tim az nechutne casto - coz se IMHO na vysledcich projevi i v wAuditu jen co tam bude radove 30-50 spolecnosti... (odhad nicim nepodlozeny)
Na serverech auditora rozmístěných v sítích různých ISP je nainstalován software vyvinutý speciálně pro potřeby auditu, který v pravidelných intervalech monitoruje servery účastníků měření a služby na serverech běžící (dostupnost serveru, web server, databáze, e-mailové služby a další). Jednotlivé měřící servery o výsledcích monitoringu neustále informují centrální server, který přicházející data dále zpracovává, vyhodnocuje a publikuje na stránkách wAuditu.
Díky unikátní technologii wAuditu, která distribuuje měřící body do různých na sobě nezávislých lokalit, je zajištěno bezproblémové fungování i v případě výpadku některého z bodů či problému v síti, kde je měřící server umístěn. Jednotlivé měřící body neustále komunikují jak s centrálou, tak spolu navzájem a jsou schopny svoji činnost koordinovat a přizpůsobovat konkrétní vzniklé situaci.
Nicmene souhlasim s tim, ze "metodika" pro profesionalni mereni by nemela byt napsana marketingovym slohem. Profesionalni mereni totiz zadne marketingove cancy nepotrebuje :-)
Je treba si uvedomit, ze klasicky webhosting je sluzba za desetikoruny az stokoruny bez garance dostupnosti a kdo ocekava, ze to pojede 100% casu tak je naivni.
V jedne z reakci psal nekdo ze zamestnancu lupy, ze pro testovani presunuji kazdou hodinu 10MB soubor. Ve vysledku se pak jedna jenom za presun tohoto souboru o cca 7,5 GB dat. Pokud to prevedeme na rok jedna se o skoro 90 GB prenesenych dat coz je castka asi 12.000,- Kc (zalezi na cene smluvene s ISP). Takze k castce 3.500,- si pripoctete 1.000,- Kc a to jsem uvedl pouze ten jeden blbej soubor. A co dalsi data. Rocne to tedy Vaseho webhostera prijde asi na 60.000,- Kc. Za tyto penize mohl ovsem webhoster poridit novy server na kterem mohli byt profesionalni statistiky, audit, monitoring nebo neco podobneho.
Ta cena je uvalena a padla na hlavu. Za jeden radek informaci platit tolik penez? Nikdy bych to nedal. A navic na celem auditu neni uvedeno ze sluzba je placena. Akorat tim matete lidi, kteri pak poslou e-mail svemu hosterovi o tom, ze neni v systemu zarazen a proc tomu tak je. Pokud bude mit hoster 500 hostingu tak pak treba kvuli tomuto stupidnimu projektu zdrazi sve sluzby o 120 korun rocne kazdemu zakaznikovi. Vim neni to moc, ale pokud do systemu zaradite vice serveru a ne jenom jeden muze se jednat o castku napriklad 360 korun rocne s tim ze kdyz tam ma zakaznik 10 domen, stoji ho to radove 3.600,- Kc rocne vice. Nekde si ty penize ten hoster stejne bude muset vybrat.
Nebo vy chcete monitorovat archivy se software, warezem (velkost 10MB by odpovidala...:-)), pornem apod.? Pak by to zrejme nemelo byt zvano wAuditem, ale docela necim jinym...
PS: Merit propustnost prenosoveho media od ASP (coz je zrejme cilem tohoto nesmyslu) na zaklade doby pro preneseni souboru je fakt docela ulet... (pokud mam 1Gbit a vy jste jen na 100Mbitu - dostanu penalizaci 10x a to je diky Vasemu zazemi...)