classificar vários arquivos e mesclar

Aug 25 2020

Desejo classificar vários arquivos de texto na ordem inversa e, em seguida, mesclar / cat em um único arquivo de texto.

a.txt

0   33.1
2   33.0
10  21.1
20  21.8

b.txt

0   30.1
2   33.0
10  28.1
20  27.8

e assim por diante *.txtarquivos

Eu quero uma saída como esta

20  21.8
10  21.1
2   33.0
0   33.1
20  27.8
10  28.1
2   33.0
0   30.1

Eu não quero assim

20  21.8
20  27.8
10  21.1
10  28.1
2   33.0
2   33.0
0   33.1
0   30.1

Eu tentei esses códigos

for file in *.txt ; do 
   sort -nrk 1,1 *.txt > "$file" ; 
done

e também tentei

sort -m *.txt

Mas a saída desses códigos não é desejada.

Estou procurando soluções usando sort merge paste catou alguma outra opção relevante.

Muito obrigado por qualquer ajuda.

Respostas

4 StéphaneChazelas Aug 25 2020 at 10:48

Classifique os arquivos individualmente e redirecione toda a saída para o arquivo resultante:

for file in *.txt ; do 
   sort -k1,1rn < "$file"
done > file.concatenated

(aqui é importante que o arquivo de saída não tenha uma .txtextensão, pois é criado primeiro pelo redirecionamento).

Ou se você quiser classificar os arquivos no local (reescrevendo-os classificados por conta própria):

set -- *.txt
ok=true
for file do
  sort -o "$file" -k1,1rn -- "$file" || ok=false done "$ok" && cat -- "$@" > file.concatenated

Essa abordagem de dois estágios nos permite detectar problemas na classificação dos arquivos antes de criar o arquivo concatenado.

Seu primeiro loop não funcionou porque você estava passando a lista completa de .txtarquivos em cada passagem do loop.

sort -mé mesclar arquivos já classificados em uma saída classificada. É o oposto do que você deseja. Você deseja classificar os arquivos que ainda não foram classificados e apenas concatenar os resultados sem fundi-los em uma saída classificada.

Aqui, os arquivos parecem ser classificados em ordem progressiva. Se você pode confiar que sempre será esse o caso, poderá apenas invertê-los, o que seria muito mais eficiente do que classificá-los ao contrário.

Para fazer isso, os sistemas GNU têm um taccomando e vários outros tail -r(embora esteja ciente de que algumas implementações usam apenas um argumento de arquivo, então você pode precisar recorrer a um loop com eles).

tac -- *.txt > file.concatenated

Observe também que -k1,1rnnão é o mesmo que -rnk1,1quando se trata de resolver empates. Quando duas linhas se comparam igualmente, sortrecorre a uma comparação lexical de toda a linha (por exemplo, aqui, 1 ae 1 bcompare igualmente com -k1,1n, mas 1 avem antes 1 blexicamente).

Com a -ropção, essa comparação de último recurso é feita ao contrário. Isso não se aplica quando um rsinalizador é adicionado a uma das especificações principais.

GNU sorttem -sque desabilitar a comparação de último recurso que fará com que ele preserve a ordem original das linhas que comparam igualmente.