Új hozzászólás Aktív témák

• #8244 Sk8erPeter nagyúr attiati #8241

  Új Válasz 2014-10-15 11:46:08 #8244

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  Sk8erPeter

  nagyúr

  válasz attiati #8241 üzenetére

  Nyilván, ez a problémádat nem oldja meg, semmi értelme nem lenne módszeresen leszedni az oldal tartalmát, amúgy is gyanús lenne. Kifejezetten az idézett felvetésre reagáltam.

  (#8243) martonx :
  Nem rossz, meg is jelöltem GitHubon, hogy meglegyen, ha kellene.

• #8242 bambano titán attiati #8238

  Új Válasz 2014-10-15 03:09:58 #8242

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  bambano

  titán

  LOGOUT blog

  válasz attiati #8238 üzenetére

  szerintem így nem érdemes hozzáfogni.
  ha egy adatra van szükséged, akkor azt az egy adatot kell lementeni és megoldani, hogy ehhez csak a minimálisan szükséges adatforgalmat generálja.

  kicsit megnézed az url-t, rögtön ki lehet találni, hogy az adatbázis azonosítójuk a 21 millióval kezdődő szám, a többi, keresési feltétel csak töltelék. ebből már látható, hogy milyen url-t kell végigpörgetni, a letöltött html-ből kibogarászni az adatot, és csak azt menteni. ez linuxon kb. 15 perces munka.

  viszont az is látszik a hirdetésekben, hogy nem adják meg a konkrét címet, vélhetőleg azért, hogy a közvetítői díj megspórolására bazírozó vevők ne tudják megkerülni az irodát. ez az a pont, ami betesz a letöltési ötletnek, mert enélkül tök feleslegesen töltöd le, nem lesz pontos adatbázisod.

• #8239 martonx veterán attiati #8238

  Új Válasz 2014-10-14 23:20:44 #8239

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  martonx

  veterán

  válasz attiati #8238 üzenetére

  offline browser nincs, csak akkor ha létezik fából vaskarika
  Te egy web crawler botra gondolsz Ilyet simán lehet írni, ami ha elég gyors a szerverük, percek alatt leszed neked mindent amit csak akarsz.
  Viszont ez így ebben a formában valóban büntetőjogi kategória lehet, sőt egy normálisan megírt multithread crawlerrel elég komoly szerver terhelést is okozhatsz nekik.

• #8237 bambano titán attiati #8236

  Új Válasz 2014-10-14 20:51:20 #8237

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  bambano

  titán

  LOGOUT blog

  válasz attiati #8236 üzenetére

  mi az az offline browser? az egész adatbázist kellene elhoznod, sql dump formátumban, nem browserrel küszködni.

• #8235 bambano titán attiati #8234

  Új Válasz 2014-10-14 20:37:55 #8235

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  bambano

  titán

  LOGOUT blog

  válasz attiati #8234 üzenetére

  az ingatlanközvetítőknél a legnagyobb érték az ingatlanadatbázis. jól elválasztható az a fajta nézegetés, amikor venni vagy eladni akarsz, meg a teljes letöltés. ha lehúzod az egészet, azt fogják gondolni, hogy versenytárs ingatlanos vagy, aki így akar kezdőadatbázist szerezni.

• #8233 bambano titán attiati #8232

  Új Válasz 2014-10-14 20:25:59 #8233

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  bambano

  titán

  LOGOUT blog

  válasz attiati #8232 üzenetére

  át, csak ha szisztematikusan leszívod az adatbázisukat, akkor azt lopásnak fogják minősíteni és megkeresnek miatta.

• #7996 Sk8erPeter nagyúr attiati #7994

  Új Válasz 2014-06-03 01:17:05 #7996

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  Sk8erPeter

  nagyúr

  válasz attiati #7994 üzenetére

  Szerintem a legegyszerűbb ezt egy Windows ütemezett feladattal lenne megoldani (Win+R > taskschd.msc). Itt beállítod, hogy napi egyszer induljon el a batch-fájlod, aminek igazából csak annyi lenne a dolga, hogy felparaméterezve elindít egy másik programot, ami a weblap letöltésért felelne, egész konkrétan én a HTTrack-re gondolok. Ennek paraméterként (a paramétereket kiolvashatod a belinkelt dokumentációból, de kérdezz, ha nem tiszta) beadhatod, hogy mit és hova töltsön le, milyen mélységben (gondolom nem szeretnéd feltétlenül a weboldal komplett tartalmát lementeni).
  Ennél egyszerűbb, teljesen ingyenes megoldás most nem jut eszembe, de ez szerintem teljesen megfelelne az igényeidnek. Innen tudod letölteni.

• #7994 attiati veterán attiati #7992

  Új Válasz 2014-06-03 00:34:04 #7994

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  attiati

  veterán

  válasz attiati #7992 üzenetére

  vagy bármilyen megoldás érdekel, ami 1 nap 1x tölti le automatikusan az adott weblap tartalmát

  a) akár win7 "belső" megoldással
  b) akár parancssorból futtatható külső programmal
  A lényeg, hogy automatikusan, 1 nap csak 1x.

  Sk8erPeter: igazából tök hülye vagyok hozzá Talán az a része érdekes a leginkább, hogy 1 nap egyszer. De lehet, hogy ezt már alapból tudja a win7?

• #7993 Sk8erPeter nagyúr attiati #7992

  Új Válasz 2014-06-03 00:33:30 #7993

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  Sk8erPeter

  nagyúr

  válasz attiati #7992 üzenetére

  És mire lennél konkrétan kíváncsi, melyik részben kellene a segítség?

• #7120 Jim-Y veterán attiati #7119

  Új Válasz 2013-05-13 18:55:09 #7120

  Új hozzászólás

  Összes hozzászólása itt Válaszok az összes hozzászólására itt Válaszok erre a hozzászólásra

  Privát üzenet küldése

  

  Jim-Y

  veterán

  válasz attiati #7119 üzenetére

  Es ha en csak netbeansben csinalnam meg akkor kiestem?

Új hozzászólás Aktív témák