WebCache - wykorzystanie serwerow Proxy - Rewolucja ?
Pawcio
http://forum.emule-project.net/index.php?showtopic=14768&hl=http-proxy&st=0
http://forum.emule-project.net/index.php?showtopic=52238
http://home.arcor.de/superlexx/webcaches/howitworks.html
W skrocie:
WebCache to nowa, rozwijana funkcja eMule. Wykorzystuje serwery Proxy do
transferu plikow. Dzieki temu wysylajac z naszych marnych lacz do jeden
osoby pewna czesc pliku, automatycznie pozostali czekajacy w kolejce sciagna
ja z serwera odciazajac nasze lacza. Dotychczas mozna bylo zauwazyc, ze im
wiecej zrodel (> 100) tym dluzsze kolejki i wolniej sie sciaga. Z WebCache
jest zupelnie odwrotnie ;)
Tyle dla zachety. Wersja testowa, dzialajaca jest juz dostepna :)
Chcialbym poradzic sie Was i przedyskutowac pare spraw. Rozpatrzmy 2 wersje:
Wersja 1. WebCache wykorzystuje serwery proxy ISP (jest to obecna
implementacja), wiec korzysci sa tylko w obrebie danego ISP. ISP powinien
byc zadowolony, gdyz znacznie zmniejsza sie ruch zewnetrzy. My jeszcze
bardziej - gdyz wszystko sciaga sie znacznie szybciej. Przyklad (troche
przesadzony): gdy ktos robi rela pliku 100MB w Niemczech, sciaga go 100
user'ow z neo (zalozmy ze nie ma wymiany miedzy tymi z neo ;) ) to TPSA
zaobserwuje ruch na laczach miedzynarodowych 10GB i na laczach krajowych -
10 GB. Z WebCache ruch miedzynarodowy wyniesie 100 MB, a w obrebie sieci
szkieletowej TP SA 10 GB i oczywiscie sciagniemy ten plik kilkaset razy
szybciej :). W przypadku "krajowego rel'a" zysk mamy "tylko" na czasie.
Wersja 2. WebCache wykorzystuje dowolny publiczny serwer proxy. Mozna taki
serwer przypisac do kazdego pliku osobno (wpisany w link ed2k, tak jak
wpisuje sie zrodla). Korzysci to znaczne zwiekszenie predkosci nie
ograniczone grupowo do ISP.
2a) Publiczny serwer proxy krajowy
Zalety:
- Znacznie zmniejszony ruch miedzynarodowy (jeszcze bardziej niz w przypadku
1). To najbardziej mogloby sie spodobac TP SA.
- Znaczne skrocenie czasu sciagania
Wady:
- Operatorzy serwerow mogliby "spac z krzesel" przy generowanym ruchu. Nie
wiem czy sa dobrze, szybkie serwery proxy w Polsce ;)
2b) "Super-szybkie" proxy np. w Japonii, gdzie kazdy za 150zl/miesiac ma
lacze 100Mb/100Mb
Zalety:
- Znaczne skrocenie czasu sciagania (moze nawet wieksze niz w 2a )
Wady:
- Jesli to mozna nazwac wada - Nasi ISP krajowi nie odnotuja zmniejszenia
ruchu miedzynarodowego ;) Czy powinnismy sie tym martwic ?
Prosze o komentarz wymienionych wariantow, szczegolnie 2a i 2b. Wersja 1 juz
dziala, jest w fazie testow (beta). Istnieje tez gotowa (ale jeszcze nie
opublikowana), specjalna wersja mojego mod'a z PowerShare, HideOS, SCS -
czyli cos dla Releaser'ow. Testowalem ja z wykorzystanie wersji 2b (szybki,
zagraniczny serwer proxy) i wyglada ze dziala.
Pozdrawiam
Kamikazee
news:cg33f7$sij$1...@atlantis.news.tpi.pl
Wwedług mnie powinny być zaimplementowane wszstike warianty. Z chęcią
potestuje.
Sarcophilus Satanicus
> Wwedług mnie powinny być zaimplementowane wszstike warianty. Z chęcią
> potestuje.
tez bym z checia potestowal. tylko nie wiem czy proxy mojego ISP bedzie
z tym dzialac i czy w ogole zauwaze jakas roznice - sciagam glownie
dosc rzadkie pliki.
--
#-\ Przemek Kulczycki <> pk[NA]metal.eu.org /-#
#-/ PRMM FAQ: http://prm.metal.eu.org/faq.htm \-#
#-\ We love Satan - Join the blasphemy! /-#
#-/ http://www.theprojecthate.net/ \-#
Koszalek Opalek
po sciganieciu testowego klienta(ostatnia wersja)
ed2k://|file|eMule-0.43b-Webcache-1.03-beta-HOTFIX-bin.rar|1232320|801610422677956A9B3AA1AD10EA0185|/
nalezy spróbować sciagnać testowy plik do sciagania
d2k://|file|WebCacheTestFile1|538968064|072BE0644A91B5B08ABE9BCBCA410DAF|/
i podzielić sie uwagami
aha działa to dla HighID
koszopal
Maciej 'napi' Napiórkowski
> dodając
> po sciganieciu testowego klienta(ostatnia wersja)
> ed2k://|file|eMule-0.43b-Webcache-1.03-beta-HOTFIX-bin.rar|1232320|801610422677956A9B3AA1AD10EA0185|/
> nalezy spróbować sciagnać testowy plik do sciagania
> d2k://|file|WebCacheTestFile1|538968064|072BE0644A91B5B08ABE9BCBCA410DAF|/
Jak dla mnie rewelacja ;). W mgnieniu oka emulek rozbujal sie do max
mozliwosci mojego lacza! :D.
Pozdrawiam.
Teo
> sciagam glownie dosc rzadkie pliki.
serwery proxy nie trzymaja danych dlugo.
--
FPH Amit - maszyny i urządzenia do sitodruku
www.amit.pl
www.teo.xt.pl
Crazy John
Użytkownik "Pawcio" <p_ruta@(MALPA)poczta.(KROPA)fm> napisał:
> [...]
a czy to sie nie gryzie w jakis sposob z idea P2P?
przeciez to jest ssanie z serwera, czyli cos a la ftp... :)
hehe
moze przesadzam, ale takie moje 1 skojarzenie ;]
Crazy John
Użytkownik "Koszalek Opalek" <koszopa...@gazeta.pl> napisał:
> [...]
> aha działa to dla HighID
i tutaj polowa polski lezy :(
thepesz
Pawcio
> z tym dzialac i czy w ogole zauwaze jakas roznice - sciagam glownie
> dosc rzadkie pliki.
warianty 2a i 2b. Obenca wersja testowa WebCache 1.03 beta pozwala na
wpisanie dowolnego serwera proxy.
Nawet z rzadkimi plikami bedzie roznica. Np. tylko 3 osoby scigaja plik, to
jak tylko jedna z nich wskoczy na kolejke upload pozostale 2 zaczynaja
sciagac z proxy. Idea jest taka ze pliki nie sa przechowywane na serwerze
proxy, sa tylko sciagane kawalki 180kB i tylko w czasie gdy ktos inny sciaga
to od klienta eMule. Wszystko po to aby nie ociazac proxy.
Pawcio
> potestuje.
osiolek.com lub osloskop.net ?
Pozdrawiam
Pawcio
>serwery proxy nie trzymaja danych dlugo.
WebCache nie przechowuje plikow na serwerze Proxy. Nic nie przeszkadza ze
proxy trzyma krotko dane, nawet mozna powiedziec ze dzieki temu moze dzialac
WebCache, inaczej wszystko by sie zapchalo.
Pozdrawiam
Pawcio
>
> i tutaj polowa polski lezy :(
Pozdrawiam
Pawcio
> a czy to sie nie gryzie w jakis sposob z idea P2P?
> przeciez to jest ssanie z serwera, czyli cos a la ftp... :)
> hehe
> moze przesadzam, ale takie moje 1 skojarzenie ;]
komputerze.
Pozdrawiam
Sarcophilus Satanicus
> Do przetestowania, potrzeba wiecej osob. Moze mala kampania na linkowni -
> osiolek.com lub osloskop.net ?
jestem za. tylko jaki serwer proxy? jakis konkretny czy kazdy swoj?
Maciej 'napi' Napiórkowski
> a jaki wpisałeś serwer proxy ?
Proxy mojego ISP (w3cache.dialog.net.pl).
ps. Tylko dla dialogowcow, tpsa i innych nie wpuszcza.
Sarcophilus Satanicus
> Nawet z rzadkimi plikami bedzie roznica. Np. tylko 3 osoby scigaja plik, to
> jak tylko jedna z nich wskoczy na kolejke upload pozostale 2 zaczynaja
> sciagac z proxy.
...jesli beda korzystaly z tego samego proxy co ja. jesli nie to dupa zbita.
a szczerze mowiac watpie zeby u mojego providera sposrod ok. 3000 abonentow
ktos w danej chwili sciagal z emula to samo co ja.
Sarcophilus Satanicus
> W skrocie:
> WebCache to nowa, rozwijana funkcja eMule. Wykorzystuje serwery Proxy do
> transferu plikow.
hmmm dziwne.
w changelogu emule'a 0.43a/b wyraznie pisze:
The highlights of the 0.43 series of eMule are:
PeerCache. A technology developed by Joltid Ltd. which lets you download/upload files from ISP
cache servers to reduce traffic and to improve download speeds.
wiec czemu osobno jest rozwijany mod WebCache?
to nie to samo?
Sarcophilus Satanicus
>> transferu plikow.
>
> PeerCache. A technology developed by Joltid Ltd. which lets you download/upload files from ISP
> cache servers to reduce traffic and to improve download speeds.
>
> wiec czemu osobno jest rozwijany mod WebCache?
> to nie to samo?
znalazlem conieco na ten temat.
http://forum.emule-project.net/index.php?showtopic=56609&st=0&hl=peercache
"there is an eMule mod called "WebCache eMule", it uses the ISP web caches to achieve the
PeerCache effect. It is in some aspects worse than PeerCache (more overhead, less lowID
support) and in some aspects better (immediate effect for user, better worst-case hit rate,
free like beer and speech, existing infrastructure)."
http://forum.emule-project.net/index.php?showtopic=52576&st=0&hl=peercache
czytam dalej a i tak nie wiem dokladnie o co chodzi.
mam moda opartego na 0.43 i probowalem wlaczyc proxy lecz skutkowalo to
uniemozliwieniem wszelkich polaczen wiec sobie darowalem.
ktos jeszcze probowal i mu sie udalo?
Teo
> jestem za. tylko jaki serwer proxy? jakis konkretny czy kazdy swoj?
Pawcio
> "there is an eMule mod called "WebCache eMule", it uses the ISP web caches
to achieve the
> PeerCache effect. It is in some aspects worse than PeerCache (more
overhead, less lowID
> support) and in some aspects better (immediate effect for user, better
worst-case hit rate,
> free like beer and speech, existing infrastructure)."
ISP dedykowanego serwera ! Dodatkowo jak dobrze pamietam trzeba oplacic
licencje Joltid Ltd. ! Krotko mowiac odpada, bo nigdy nie bedzie to dzialac
;) Dla WebCache wszystko jest gotowe, tylko trzeba namowic wszystkich na
korzystanie z mod'a z ta funkcja.
> czytam dalej a i tak nie wiem dokladnie o co chodzi.
> mam moda opartego na 0.43 i probowalem wlaczyc proxy lecz skutkowalo to
> uniemozliwieniem wszelkich polaczen wiec sobie darowalem.
To jest zuplenie inne proxy. WebCache dziala na innej zasadzie.
Pozdrawiam
Pawcio
zbita.
> a szczerze mowiac watpie zeby u mojego providera sposrod ok. 3000
abonentow
> ktos w danej chwili sciagal z emula to samo co ja.
dla wszystkich, nie tylko osob z danego ISP) moze byc zwiazany z konkretnym
plikiem (kazdy plik moze miec inne proxy - mniejsze obciazenie). Ponadto
jezeli "oblegane" pliki beda sciagac sie blyskawicznie przez proxy to beda
znacznie ktotsze kolejki => zrobi sie miejsce na pliki "rzadkie".
Pozdrawiam
Sarcophilus Satanicus
> Dla WebCache wszystko jest gotowe, tylko trzeba namowic wszystkich na
> korzystanie z mod'a z ta funkcja.
tylko zeby ten mod byl stabilny i bez bledow...
> To jest zuplenie inne proxy.
to po co zaimplementowali cos co w ogole nie dziala?
Teo
ustawianie domyslnego proxy, dodatkowo dla kazdego pliku z osobna
mozliwosc ustawienia proxy indywidualnie - tak jak w PhoenixMod, kazdy
plik moze miec inna max. ilosc zrodel.
Kamikazee
news:cg33f7$sij$1...@atlantis.news.tpi.pl
Propnuje użycie proxy ICMu:
w3cache.icm.edu.pl
port: 8080
I zrobienie jakiegoś testowego rela.
Kamikazee
Użytkownik "Janusz - Vahanara" <vaha...@olimp.gapp.pl> napisał w wiadomości
news:wengx2nb...@vahanara.pl
Kamikazee
Użytkownik "Pawcio" <p_ruta@(MALPA)poczta.(KROPA)fm> napisał w wiadomości
news:cg33f7$sij$1...@atlantis.news.tpi.pl
Zapraszam do testowego release'a news:cg5blr$m28$1...@mamut1.aster.pl
temat wiadomośći: WebCache Testowy release
data: 20 sierpnia 2004 19:16
thepesz
Dokerowski
> temat wiadomośći: WebCache Testowy release
> data: 20 sierpnia 2004 19:16
Zapusciłem i niestety efekt nijaki. Pociągnął trochę od Pawcia i stop. W
sumie po pół godzinie mam niecałe pół mega. Cache ustawiony na icm.
Dokerowski
Pawcio
> sumie po pół godzinie mam niecałe pół mega. Cache ustawiony na icm.
zapomnialem ze mod dostepny, czyli WebCache 1.03 Beta ma blad. Upload konczy
sie po 180kB i wyrzuca calkowicie z kolejki, wiec rzeczywiscie nici ze
sciagania :( Ten blad poprawilem w swoim modzie. Test bedzie trzeba
powtorzyc.
Pozdrawiam
Kamikazee
Wiem już poprawiłem
Pawcio
> ustawianie domyslnego proxy, dodatkowo dla kazdego pliku z osobna
> mozliwosc ustawienia proxy indywidualnie - tak jak w PhoenixMod, kazdy
> plik moze miec inna max. ilosc zrodel.
Pozdrawiam
Pawcio
> nienajlepszy pomysł.
To moze adresik podasz? ;)
Pozdrawiam
sill01
> In article <cg54sr$4dk$1...@nemesis.news.tpi.pl>
> the infidel Pawcio (p_ruta@poczta) begging for mercy writes:
>
>
>>Dla WebCache wszystko jest gotowe, tylko trzeba namowic wszystkich na
>>korzystanie z mod'a z ta funkcja.
>
>
> tylko zeby ten mod byl stabilny i bez bledow...
>
>
>>To jest zuplenie inne proxy.
>
>
> to po co zaimplementowali cos co w ogole nie dziala?
>
RafalB
providera teleenergo w moim przypadku(pytam majac na mysli korzysci
tylko dla emule-bo w3cache.irc zawsze moge ustawic)
--
RafalB
Badz czlowiekiem, nie karm trolla.
Kocureq
> Zapraszam do lektury:
WebCacheTestFile1 zasuwa fajnie i szybko się wyszukuje :)
Z oceną reszty poczekam do jutra (aż się połączy osioł ze wszystkimi
źródłami i może znajdzie proxy).
Natomiast dzisiaj wysypał mi się eMule v0.43b Pawcio 5.05 PE Beta oprzy
przełączaniu z "on reserve" na "transferring clients" - w miejscu gdzie
zwykle sa klienty ssace od nas pliki (tzw. Upload :).
Dodatkowo - czy w tym modzie będzie zakładka "release" obsługująca RDFy?
--
____________________Kocureq____________________
==== kocureq[małpa]kocu[nic]req[kropka]com ====
========== IRCNet : Kocureq @ #ocean ==========
======== GG# 1365999 ==== ICQ# 31547220 =======
sill01
> Mozna taki serwer przypisac do kazdego pliku osobno (wpisany w link
ed2k, tak jak
> wpisuje sie zrodla).
To akurat rozwiązywałoby problem który proxy wybrać osoba wstawiająca by
wybierała hmm a być może my ustawiwszy w innych tam, też byśmy wysyłali
via proxy Tylko żeby niebyło tak, że ktoś wybiera proxy na który pół
polski się dostać nie może.
sill01
> W przypadku wariantu 2 tak byloby najlepiej ;)
>
> Pozdrawiam
Mozna by też ustawić jeden adres swojego ISP a drugi jakiś póbliczny i
dzięki temu niebyłoby tak że ktoś wysyłając automatycznie eliminuje z
odbioru przez proxy pół polski. Wydaje mi się, że to by było najlepsze
rozwiązanie. Nikt nie ucierpi (zbytnio), a my możemy się cieszyć szybkim
transferem
mehdi.k...@gmail.com
> Zapraszam do lektury:
> http://forum.emule-project.net/index.php?showtopic=14768&hl=http-proxy&st=0
> http://forum.emule-project.net/index.php?showtopic=52238
> http://home.arcor.de/superlexx/webcaches/howitworks.html
>
> W skrocie:
> osoby pewna czesc pliku, automatycznie pozostali czekajacy w kolejce sciagna
> ja z serwera odciazajac nasze lacza. Dotychczas mozna bylo zauwazyc, ze im
> wiecej zrodel (> 100) tym dluzsze kolejki i wolniej sie sciaga. Z WebCache
> jest zupelnie odwrotnie ;)
> Tyle dla zachety. Wersja testowa, dzialajaca jest juz dostepna :)
> Chcialbym poradzic sie Was i przedyskutowac pare spraw. Rozpatrzmy 2 wersje:
>
> Wersja 1. WebCache wykorzystuje serwery proxy ISP (jest to obecna
> implementacja), wiec korzysci sa tylko w obrebie danego ISP. ISP powinien
> byc zadowolony, gdyz znacznie zmniejsza sie ruch zewnetrzy. My jeszcze
> bardziej - gdyz wszystko sciaga sie znacznie szybciej. Przyklad (troche
> przesadzony): gdy ktos robi rela pliku 100MB w Niemczech, sciaga go 100
> user'ow z neo (zalozmy ze nie ma wymiany miedzy tymi z neo ;) ) to TPSA
> zaobserwuje ruch na laczach miedzynarodowych 10GB i na laczach krajowych -
> 10 GB. Z WebCache ruch miedzynarodowy wyniesie 100 MB, a w obrebie sieci
> szkieletowej TP SA 10 GB i oczywiscie sciagniemy ten plik kilkaset razy
> szybciej :). W przypadku "krajowego rel'a" zysk mamy "tylko" na czasie.
>
> Wersja 2. WebCache wykorzystuje dowolny publiczny serwer proxy. Mozna taki
> ograniczone grupowo do ISP.
> 2a) Publiczny serwer proxy krajowy
> Zalety:
> - Znacznie zmniejszony ruch miedzynarodowy (jeszcze bardziej niz w przypadku
> 1). To najbardziej mogloby sie spodobac TP SA.
> - Znaczne skrocenie czasu sciagania
> Wady:
> - Operatorzy serwerow mogliby "spac z krzesel" przy generowanym ruchu. Nie
> wiem czy sa dobrze, szybkie serwery proxy w Polsce ;)
>
> 2b) "Super-szybkie" proxy np. w Japonii, gdzie kazdy za 150zl/miesiac ma
> lacze 100Mb/100Mb
> Zalety:
> - Znaczne skrocenie czasu sciagania (moze nawet wieksze niz w 2a )
> Wady:
> - Jesli to mozna nazwac wada - Nasi ISP krajowi nie odnotuja zmniejszenia
> ruchu miedzynarodowego ;) Czy powinnismy sie tym martwic ?
>
> Prosze o komentarz wymienionych wariantow, szczegolnie 2a i 2b. Wersja 1 juz
> dziala, jest w fazie testow (beta). Istnieje tez gotowa (ale jeszcze nie
> opublikowana), specjalna wersja mojego mod'a z PowerShare, HideOS, SCS -
> czyli cos dla Releaser'ow. Testowalem ja z wykorzystanie wersji 2b (szybki,
> zagraniczny serwer proxy) i wyglada ze dziala.
>
> Pozdrawiam