• Najnowsze pytania
  • Bez odpowiedzi
  • Zadaj pytanie
  • Kategorie
  • Tagi
  • Zdobyte punkty
  • Ekipa ninja
  • IRC
  • FAQ
  • Regulamin
  • Książki warte uwagi

Usówanie duplikatów z pliku txt - Bash

Object Storage Arubacloud
0 głosów
286 wizyt
pytanie zadane 3 października 2019 w Inne języki przez jaholden Nowicjusz (150 p.)

Cześć!

Potrzebuję usunąć zduplikowane linie z pliku tekstowego. Plik ma ok 3 mln linii i praca z excelem to w tym przypadku zmora. 

Polecenie próbuję wywołać komendą:

bash\bash.exe uniq plik.txt > wynik.txt

Po wywołaniu, plik "wynik.txt" zmienia godzinę zapisu, więc komenda w jakiś sposób wywiera na niego wpływ, jednak nic do niego nie wpisuje. Nie zależy mi na tym, żeby dane wpadały do nowego pliku, może być tak, że po prostu plik wejściowy "plik.txt" zostanie zaktualizowany i pomniejszony o zduplikowane linie. 

Czy możecie mi pomóc w prawidłowym ustawieniu komendy?

Dzięki i pozdrawiam

1 odpowiedź

+1 głos
odpowiedź 3 października 2019 przez adrian17 Ekspert (344,860 p.)
wybrane 3 października 2019 przez jaholden
 
Najlepsza
Coś dziwnego tu robisz. Wywołujesz bash.exe z argumentami "uniq plik.txt". To jest co innego, niż wpisanie "uniq plik.txt" w uruchomionym bashu.

BTW, jeśli jesteś na windowsie, nie potrzebujesz do tego basha. W powershellu jest sort -unique: https://superuser.com/a/1316321
komentarz 3 października 2019 przez jaholden Nowicjusz (150 p.)
Tak, pracuję na Windows 10. A czy jest możliwość wywołania komend PowerShell z pliku, np .bat? Plik o którym wspomniałem jest efektem pracy makra. Chciałbym mieć możliwość wywołania z poziomu makra VBA zewnętrznego pliku, w tym przypadku jak zasugerowałeś z komendą PowerShell, która usunie duplikaty a ja potem wczytam ten plik znów z poziomu VBA i będę kontynuował pracę na nim.
komentarz 3 października 2019 przez adrian17 Ekspert (344,860 p.)
Tak, dla PSa rozszerzenie jest .ps1 (w odróżnieniu od .bat dla batcha)

Podobne pytania

0 głosów
1 odpowiedź 554 wizyt
pytanie zadane 11 maja 2018 w Inne języki przez Q_Nick Mądrala (5,010 p.)
0 głosów
1 odpowiedź 819 wizyt
pytanie zadane 15 grudnia 2017 w Inne języki przez robRoy Użytkownik (970 p.)
0 głosów
1 odpowiedź 142 wizyt
pytanie zadane 14 grudnia 2017 w Inne języki przez niezalogowany

92,575 zapytań

141,424 odpowiedzi

319,650 komentarzy

61,961 pasjonatów

Motyw:

Akcja Pajacyk

Pajacyk od wielu lat dożywia dzieci. Pomóż klikając w zielony brzuszek na stronie. Dziękujemy! ♡

Oto polecana książka warta uwagi.
Pełną listę książek znajdziesz tutaj.

Akademia Sekuraka

Kolejna edycja największej imprezy hakerskiej w Polsce, czyli Mega Sekurak Hacking Party odbędzie się już 20 maja 2024r. Z tej okazji mamy dla Was kod: pasjamshp - jeżeli wpiszecie go w koszyku, to wówczas otrzymacie 40% zniżki na bilet w wersji standard!

Więcej informacji na temat imprezy znajdziecie tutaj. Dziękujemy ekipie Sekuraka za taką fajną zniżkę dla wszystkich Pasjonatów!

Akademia Sekuraka

Niedawno wystartował dodruk tej świetnej, rozchwytywanej książki (około 940 stron). Mamy dla Was kod: pasja (wpiszcie go w koszyku), dzięki któremu otrzymujemy 10% zniżki - dziękujemy zaprzyjaźnionej ekipie Sekuraka za taki bonus dla Pasjonatów! Książka to pierwszy tom z serii o ITsec, który łagodnie wprowadzi w świat bezpieczeństwa IT każdą osobę - warto, polecamy!

...