Forumi


Povratak   PC Ekspert Forum > Računala > Problemi > Softverski problemi
Ime
Lozinka

Odgovori
 
Uređivanje
Staro 21.05.2018., 13:17   #1
henri_007
Premium
Moj komp
 
Datum registracije: Jul 2007
Lokacija: Zagreb
Postovi: 475
Pretraživanje ogromnog .txt

Imam par ogromnih .txt fajlova, ogromnih tipa 10-15gb. U svakome je cca 100 milijuna linija. E sad, na koji način tako nešto najbezbolnije pretraživati?

Skinuo sam LTFviewer ali nisam baš najsretniji kako radi. Postoji li neki program kojem bi dao 2-3 dana da si to indeksira i organizira pa da buduće pretraživanje bude bezbolnije?
henri_007 je offline   Reply With Quote
Staro 22.05.2018., 09:47   #2
Forace
Premium
Moj komp
 
Datum registracije: Jul 2012
Lokacija: Petrinja
Postovi: 1,604
https://www.andreafortuna.org/forens...es-on-windows/

Probaj otuda nešto izgleda da ima dobrih kandidata ...
Forace je offline   Reply With Quote
Oglasni prostor
Oglas
 
Oglas
Staro 22.05.2018., 11:07   #3
Mario92
Omicron Alpha resident
Moj komp
 
Mario92's Avatar
 
Datum registracije: Jun 2009
Lokacija: Bistra
Postovi: 4,762
Ja sam koristio TailBlazer:

https://github.com/RolandPheasant/TailBlazer

Istina, nisam na tako velikim file-ovima ali je radio super na ~1gb txt-ovima
__________________

Ryzen 7 5700G

AsRock B550 Pro4

HyperX Fury DDR4 3000MHz (4 x 16GB)

Kingston A2000 1TB NVMe

Intel 660p 1TB NVMe

Fortron Hexa 400W

Random PC case

Proxmox VE

95% of the world is retarded, I'm glad I am the 10%.
HP Elitebook 840 G7

Intel i5 10310U

Corsair Vengeance 2x16GB 3000MHz

SK Hynix P31 Gold 1TB

14" FHD IPS

Mario92 je offline   Reply With Quote
Staro 27.05.2018., 01:23   #4
Bubba
E Pluribus UNIX
Moj komp
 
Bubba's Avatar
 
Datum registracije: Oct 2002
Lokacija: M82
Postovi: 6,532
Citiraj:
Autor henri_007 Pregled postova
Imam par ogromnih .txt fajlova, ogromnih tipa 10-15gb. U svakome je cca 100 milijuna linija. E sad, na koji način tako nešto najbezbolnije pretraživati?

Skinuo sam LTFviewer ali nisam baš najsretniji kako radi. Postoji li neki program kojem bi dao 2-3 dana da si to indeksira i organizira pa da buduće pretraživanje bude bezbolnije?
Postoji, i zove se "database engine"; na tebi je da biras koji ti odgovara, jer 100M linija i par desetaka GB kolicine je ionako nes(p)retno samo po sebi.
__________________
Programer
Rok od dva mjeseca u stvari znači četiri, ali nikako ispod šest.

Zadnje izmijenjeno od: Bubba. 27.05.2018. u 12:07.
Bubba je offline   Reply With Quote
Staro 28.05.2018., 11:09   #5
henri_007
Premium
Moj komp
 
Datum registracije: Jul 2007
Lokacija: Zagreb
Postovi: 475
Citiraj:
Autor Bubba Pregled postova
Postoji, i zove se "database engine";
Kaj je to? Jel se to jede?

Inače kako sam riješio problem. Mislio sam zaposliti RPI preko noći da to pretražuje ali RPI i grep to pretraže za 4-5mim. Za moje potrebe gdje imam 2-3 pretrage tjedno i više nego zadovoljavajuće.
henri_007 je offline   Reply With Quote
Oglasni prostor
Oglas
 
Oglas
Odgovori


Uređivanje

Pravila postanja
Vi ne možete otvarati nove teme
Vi ne možete pisati odgovore
Vi ne možete uploadati priloge
Vi ne možete uređivati svoje poruke

BB code je Uključeno
Smajlići su Uključeno
[IMG] kod je Uključeno
HTML je Isključeno

Idi na