Twoje PC  
Zarejestruj się na Twoje PC
TwojePC.pl | PC | Komputery, nowe technologie, recenzje, testy
B O A R D
   » Board
 » Zadaj pytanie
 » Archiwum
 » Szukaj
 » Stylizacja

 
M E N U
  0
 » Nowości
0
 » Archiwum
0
 » Recenzje / Testy
0
 » Board
0
 » Rejestracja
0
0
 
Szukaj @ TwojePC
 

w Newsach i na Boardzie
 
OBECNI NA TPC
 
 » XepeR 18:13
 » Kilgor 18:13
 » Menah 18:10
 » kicior 18:06
 » Carat 18:03
 » zibi13 17:59
 » Druzil 17:54
 » DJopek 17:49
 » siwydym 17:43
 » mravel 17:42
 » Promilus 17:37
 » PeKa 17:35
 » JE Jacaw 17:28
 » Aeternus 17:28
 » Artaa 17:27
 » cVas 17:22
 » slanter 17:19
 » ngP 17:18
 » Kenjiro 17:08
 » KHot 17:08

 Dzisiaj przeczytano
 36860 postów,
 wczoraj 25433

 Szybkie ładowanie
 jest:
włączone.

 
ccc
TwojePC.pl © 2001 - 2025
A R C H I W A L N A   W I A D O M O Ś Ć
    

[soft] Jaki jest teraz top-notch downloader stron www? , kubazzz 16/06/09 19:16
Mam do zripowania trochę z pewnymi ograniczeniami - program musi się zgłaszać jako dobra przeglądarka, musi limitować ilość jednoczesnych połączeń i być może robić jakieś przerwy w ściaganiu bo serwis który chcę zripować wywalił jakieś porypane zasady:
These three downloading violations will block your account and access or have it closed for Terms of Use violations:

1) Repeatedly attempting to download more than 2 zips at the same time
2) Multi threading downloads (making multiple requests for the same file)
3) Using a bot to spider or scrape the site.

Jak skuteczne w wykrywaniu robota mogą być skrypty po stronie serwera?

SM-S908

  1. znowu kopiujesz internet ? , bajbusek 16/06/09 19:34
    moim zdaniem kazdy z downloaderow nie spelnia powyższych 3 obostrzeń ...

  2. nie wiem czy top-notch , daver 16/06/09 19:57
    ale wget da rade.

    I use arch btw

    1. wget jest dla linuxiarzy, póki co sprawdza się , kubazzz 16/06/09 20:39
      teleport pro bo można mu ustawić własny UAString i limitować ilość połączeń

      SM-S908

      1. skoro , daver 16/06/09 20:53
        teleport pro sie sprawdza, to po co pytanie?

        btw.
        -nie okresliles, ze to ma byc dla windowsiarzy
        - $wget --user-agent=""
        -wget otwiera jedno polaczenie

        I use arch btw

        1. sprawdza sie i nie sprawdza , kubazzz 16/06/09 21:00
          poza tym jak zawsze po zadaniu pytania zaczalem sam glebiej szukac.
          Nie sprawdza sie bo jednak musze zrobic filtry na tresc, mam za wolne lacze zeby sciagnac wszystko [a czesc sie w pewien sposob dubluje].

          SM-S908

      2. wget jest tez pod win32 , DrLamok 16/06/09 21:31
        i dosyć często go nawet używam...

  3. kiedyś używałem httracka, o ile pamiętam, był wypasiony w opcje, limity i wyuzdania konfig , bwana 16/06/09 21:31
    uracyjne. http://www.httrack.com/

    Pozdrawiam Cię braterskim "Ssij";-D

    "you don't need your smile when I cut
    your throat"

    1. sprawdziłem tego , kubazzz 16/06/09 21:53
      httrack, w sumie niegłupi, zobyczymy co się lepiej sprawdzi.

      SM-S908

  4. a jeszcze niech mi ktoś przypomni co się robiło jak Opera wariuje z cachem , kubazzz 16/06/09 21:43
    obrazki zanikają, strony się nie ładują, albo nie ładuje się odświeżona treść, trzeba wymuszać pełen reload, czasem w ogóle się zacina podczas ładowania.
    Czyściłem historie i cache, zainstalowałem nowszą wersję i dalej to samo.

    SM-S908

  5. najlepszy jest WebCopier , Kenny 16/06/09 22:39
    tylko ciezko witaminke dostac

    .:Pozdrowienia:.

  6. Czyżby ktoś się jednak skusił na materiały z elitarnych pornoserwisów? ;) , Rhobaak 16/06/09 22:43
    ...

    Kor2dual3,2hZ overkloc,4Gbit Ram
    G-forc 460 gietex,barakudy
    Children of Neostrada Association MVP

  7. Offline Explorer Enterprise , Pawiano 16/06/09 23:16
    da sie ladnie poustawiac chyba wszystko :)

    1. lol, tylko $499.95 , daver 16/06/09 23:42
      n/c

      I use arch btw

      1. ale warto ! , Pawiano 17/06/09 12:17
        ....

    
All rights reserved ® Copyright and Design 2001-2025, TwojePC.PL