PC Ekspert Forum

PC Ekspert Forum (http://forum.pcekspert.com/index.php)
-   Softverski problemi (http://forum.pcekspert.com/forumdisplay.php?f=42)
-   -   Pretraživanje ogromnog .txt (http://forum.pcekspert.com/showthread.php?t=292575)

henri_007 21.05.2018. 12:17

Pretraživanje ogromnog .txt
 
Imam par ogromnih .txt fajlova, ogromnih tipa 10-15gb. U svakome je cca 100 milijuna linija. E sad, na koji način tako nešto najbezbolnije pretraživati?

Skinuo sam LTFviewer ali nisam baš najsretniji kako radi. Postoji li neki program kojem bi dao 2-3 dana da si to indeksira i organizira pa da buduće pretraživanje bude bezbolnije?

Forace 22.05.2018. 08:47

https://www.andreafortuna.org/forens...es-on-windows/

Probaj otuda nešto izgleda da ima dobrih kandidata ...

Mario92 22.05.2018. 10:07

Ja sam koristio TailBlazer:

https://github.com/RolandPheasant/TailBlazer

Istina, nisam na tako velikim file-ovima ali je radio super na ~1gb txt-ovima

Bubba 27.05.2018. 00:23

Citiraj:

Autor henri_007 (Post 3196098)
Imam par ogromnih .txt fajlova, ogromnih tipa 10-15gb. U svakome je cca 100 milijuna linija. E sad, na koji način tako nešto najbezbolnije pretraživati?

Skinuo sam LTFviewer ali nisam baš najsretniji kako radi. Postoji li neki program kojem bi dao 2-3 dana da si to indeksira i organizira pa da buduće pretraživanje bude bezbolnije?

Postoji, i zove se "database engine"; na tebi je da biras koji ti odgovara, jer 100M linija i par desetaka GB kolicine je ionako nes(p)retno samo po sebi.

henri_007 28.05.2018. 10:09

Citiraj:

Autor Bubba (Post 3198040)
Postoji, i zove se "database engine";

Kaj je to? Jel se to jede? :care: :care:

Inače kako sam riješio problem. Mislio sam zaposliti RPI preko noći da to pretražuje ali RPI i grep to pretraže za 4-5mim. Za moje potrebe gdje imam 2-3 pretrage tjedno i više nego zadovoljavajuće.


Sva vremena su GMT +2. Sada je 03:50.

Powered by vBulletin®
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
© 1999-2023 PC Ekspert - Sva prava pridržana ISSN 1334-2940
Ad Management by RedTyger