Estou baixando vários arquivos de uma lista, usando wget, com este
wget -nc --input-file=list
O problema desse método é que ele baixa arquivos em sequência e demora muito.
Eu sei que posso dividir o arquivo em vários arquivos menores e disparar manualmente vários comandos. Eu pergunto se é possível fazer isso automaticamente.
Quando trabalho com scripts Bash, sempre crio arquivos usando vi.
Estou depurando um script que em teoria está escrito corretamente e resolvi verificar os arquivos que criei usando o filecomando. Isto é o que eu vejo.
myScript1 Bourne-Again shell script text executable, Unicode text, UTF-8 text
myScript2 ASCII text
myScript3 POSIX shell script text executable, ASCII text
myScript4 Unicode text, UTF-8 text
Como quatro scripts criados no mesmo dia podem viter codificações diferentes?
O que estou depurando éASCII text
Como mudar isso para Bourne-Again shell script text executable, Unicode text, UTF-8 text?
Eu tenho um arquivo de texto enorme que contém esta estrutura:
title;description;date
O problema é que descriptionmain contém parágrafos, como:
title;description;data
MyText;Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aliquam est dolor, molestie a rhoncus vel, congue sed diam. Vestibulum pellentesque libero eleifend dolor finibus vestibulum. Curabitur at suscipit tellus, at viverra ex. Nulla sem nibh, laoreet a porta a, convallis ac augue. Aliquam diam sapien, rutrum sed nulla lobortis, hendrerit rutrum diam. Donec tellus quam, maximus at mollis sit amet, consequat eget orci. Duis id vestibulum metus. Nulla convallis tortor diam, a tempus quam mollis sed. Aliquam at fermentum nibh, quis sodales orci. Maecenas viverra ultrices lobortis. Morbi viverra, tortor in mattis tincidunt, augue erat condimentum leo, a dignissim nulla lacus ac augue. Sed tincidunt rutrum sapien, sodales commodo sapien. Sed ultrices, augue vitae porta viverra, eros magna pellentesque leo, in bibendum enim enim non nulla. Nullam vel venenatis leo.
Sed sed vulputate nulla. Nullam hendrerit justo quis ante aliquet ullamcorper. Praesent at rhoncus ipsum, in sodales felis. Nam eu ante accumsan urna tempus rutrum at in felis. Maecenas eleifend enim nec augue eleifend, ut sagittis leo tincidunt. In non felis pretium, accumsan mi sit amet, hendrerit lectus. Nullam auctor mi non ligula aliquam commodo. Nunc mollis consequat purus, sit amet rutrum elit sodales sit amet. Suspendisse potenti. Ut a tempor urna. Etiam vitae venenatis ex.
Nunc ut mattis nibh. Morbi varius accumsan purus, vel facilisis eros suscipit id. Sed non accumsan arcu, pretium pulvinar urna. Quisque a neque faucibus, condimentum velit eget, varius lorem. Duis varius iaculis ullamcorper. Maecenas vitae fringilla mi, ultrices finibus justo. Suspendisse vel nibh tortor. Nullam ullamcorper justo augue, molestie lacinia lorem varius et. Etiam sed pulvinar metus, ac euismod arcu. Morbi laoreet dolor volutpat, tempor nunc sit amet, lobortis ipsum. Quisque posuere commodo sollicitudin. Vivamus consectetur ligula sed ante tristique congue. Duis faucibus lacus tellus, sed consectetur purus ornare vitae.;2023-07-12
Como faço para converter isso para JSON usando o terminal do macOS?
NOTA: Não quero usar conversores online por causa de dados confidenciais.
Eu tentei coisas como
ruby -r json -r csv -e 'puts CSV.parse(STDIN, headers:true).map(&:to_h).to_json' < myFile.csv > myFile.json
Mas estes falham. Suspeito porque eles interpretam as quebras de linha no parágrafo como o final de uma linha CSV e o início da próxima.
Quando faço um cat -e myFile.csvvejo $como marcador para as linhas e para as quebras dentro dos parágrafos. Mesmo marcador!
Quando eu emito um fileno CSVeu vejo
Unicode text, UTF-8 text, with very long lines, with CRLF line terminators
Eu não tenho ideia de como fazer isso.
Obrigado
Eu tenho um arquivo CSV com milhares de linhas como estas
1664;4;5;35;37;43;5;6
1663;21;23;32;40;49;8;11
1662;16;17;34;35;44;5;10
1661;2;9;23;32;40;6;7
1660;23;25;30;44;47;9;12
1659;3;5;9;32;43;6;10
1658;4;6;10;13;34;3;5
1657;8;9;33;35;40;3;6
1656;15;20;31;44;48;1;3
1655;25;27;35;40;45;7;11
1654;7;32;33;34;38;6;9
1653;5;7;11;27;37;6;12
1652;7;31;33;35;36;7;10
1651;4;12;34;35;45;1;9
1650;5;8;29;35;48;5;6
1649;2;11;28;42;48;4;9
1648;2;11;12;19;38;4;8
Você pode ver que os números entre 1 e 9 são de um único dígito.
Como posso usar sedou algo para converter esses números em dois dígitos, precedendo um zero para eles, como
01 02 03 04 05 06 07 08 09
em vez de
1 2 3 4 5 6 7 8 9
Desde já, obrigado.
Eu tenho um arquivo txt com blocos de texto como este:
17-01-2023
Purchase AAA
Apple Pay John Doe
Full Payment
-11,34€
0,11€
30-01-2023
Purchase BBB
Mastercard Jane Doe
Installment
-23,90€
0,24€
Assim, temos em sequência, a data, o tipo de compra, o tipo de pagamento e nome, o tipo de pagamento, o valor como negativo e o desconto.
Eles se repetem no arquivo com milhares de entradas.
Quero somar os valores, neste exemplo, 11,34 + 23,90 e obter o total como positivo. Lembre-se de que há um símbolo do euro após o número e que, na minha localidade, a vírgula é o separador decimal.
Como faço isso no terminal, usando, digamos, sed, awk, etc.?
Eu tenho zilhões de diretórios dentro de um diretório principal. Cada um desses diretórios tem vários níveis de subdiretórios. Espalhados entre eles, existem arquivos chamados Info.plist.
Dentro desses Info.plistarquivos, existem linhas de linha estas:
<string>/Users/Shared/Library/Mail/V7/74309-67B6-44E3-BD66-9384D1E54398/Junk.mbox</string>
essas linhas, que podem ser uma ou várias por arquivo, podem ser diferentes, como
<string>/Users/Shared/Library/Mail/V7/74398/Junk.mbox</string>
<string>/Users/Shared/Library/Mail/V7/7-67B8/Sent.mbox</string>
<string>/Users/Shared/Library/Mail/V7/OLD/Old.mbox</string>
Estou interessado em localizar essas linhas dentro desses Info.plistarquivos e alterar a Sharedparte para Fireball.
Assim, a linha anterior se tornará
<string>/Users/Fireball/Library/Mail/V7/74398/Junk.mbox</string>
<string>/Users/Fireball/Library/Mail/V7/7-67B8/Sent.mbox</string>
<string>/Users/Fireball/Library/Mail/V7/OLD/Old.mbox</string>
Mantendo o resto como estão.
Então, primeiro eu tenho que escanear uma estrutura de diretórios recursiva, localizar todos os Info.plistarquivos que eles possuem, escanear dentro de cada um Info.plistpara a palavra- Sharedchave se eles forem usados em um caminho e mudar isso para Fireball.
Como faço isso usando algum comando unix mágico?
estou mexendo com isso
find . -type f -name Info.plist -exec sed 's/Shared/Fireball/g' {} +
Isso quase parece estar funcionando, pois imprime para consolar as alterações corretas, mas os arquivos não são alterados.
Eu tenho um arquivo csv com sete números por linha assim:
1083,20,28,42,23,10,43
1084,20,5,29,59,40,33
1085,39,50,21,12,40,55
1086,45,4,6,23,10,2
1087,36,46,28,32,3,20
Eu quero manter o primeiro número no lugar (coluna 1) e classificar as colunas de 2 a 7, tornando o arquivo como
1083,10,20,23,28,42,43
1084,5,20,29,33,40,59
1085,12,21,39,40,50,55
1086,2,4,6,10,45,23
1087,3,20,28,32,36,46
Como posso fazer isso com awk, sedou qualquer outra coisa?
Obrigado
Eu trabalho em uma empresa que não me deixa instalar nenhum software em meus computadores e eu corro janelas horríveis lá.
Preciso limpar muitos textos que copio da intranet e salve como arquivo txt. Então eu tenho que usar sede/ou awkeditores online ao vivo, como este ou este
Esses textos são assim
01
010010-26.2010.501.0026 fafas fasdf asdf asdfsadf asdfasd fasd asasdff
fdfsadf adsf adsf asdf asdfas fadsf asdfa
02
0011-15.2016.501.0012 fafas fasdf asdf asdfsadf asdfasd fasd asasdff
asdfasd fasd asasdff
asdfasd fasd asasdff
0011-125.2013.501.0012
asdfasd fasd asasdff
Veja os números como 0011-15.2016.501.0012este é o que eu quero. Não me importo com o resto, mas quero criar um novo texto limpo com todos esses números, um por linha. No exemplo anterior, preciso de um texto com
010010-26.2010.501.0026
0011-15.2016.501.0012
0011-125.2013.501.0012
o .501.está sempre presente, em todos os números, como o 4º grupo.
Eu tentei este comando no editor online sed
's/\([0-9]*\-[0-9]*\.[0-9]*\.501\.[0-9]*\)/\1/'
Não está funcionando.
Quando abro o bash e pressiono a seta para cima, vejo o último comando que digitei. Continuar pressionando a seta para cima mostrará uma série de comandos digitados no passado.
Como faço para encontrar um comando específico dessa lista, em vez de pressionar a seta para cima n vezes?
Eu tenho um arquivo CSV com algo como
10;12;33;44;55;66;77;88
1;2;3;4;5;6;7;8
110;112;133;144;155;616;771;818
...etc
Cada linha tem oito números separados por ;.
Eu preciso adicionar um novo campo no início de cada linha, começando com 1184 e descendo, então o arquivo final será
1184;10;12;33;44;55;66;77;88
1183;1;2;3;4;5;6;7;8
1182;110;112;133;144;155;616;771;818
... etc
Como posso fazer isso com awkou algo que funcione no macOS?
tenho um arquivo assim
{"100":["0.00001","10","0.01"],
"101":["0.0001","100","0.1"],
"102":["1","1000","1"],
....
"103":["0.01","10000","10"]}
Eu quero trocar o segundo número com o terceiro, dentro de cada array, convertendo-o em
{"100":["0.00001","0.01","10"],
"101":["0.0001","0.1","100"],
"102":["1","1","1000"],
....
"103":["0.01","10","10000"]}
Como faço isso com sed, awk, ou qualquer outra coisa?
Observe a existência de {e }no primeiro e último registros.
obrigado
Eu tenho uma linha com milhares de linhas assim:
{"100K";"0.00001";"10";"0.01"]}
{"101K";"0.0001";"100";"0.1"]}
{"102K";"1";"1000";"1"]}
{"102K";"1";"1000";"1"]}
{"103K";"0.01";"10000";"10"]}
{"104K";"0.1";"100000";"100"]}
{"105K";"1";"1000000";"1000"]}
{"109K";"0.000001";"1";"1"]}
{"120K";"0.000012";"12";"12"]}
Eu quero substituir a primeira ocorrência de ;em uma linha por:[
Tornando essas linhas iguais a
{"100K":["0.00001";"10";"0.01"]}
{"101K":["0.0001";"100";"0.1"]}
{"102K":["1";"1000";"1"]}
{"102K":["1";"1000";"1"]}
{"103K":["0.01";"10000";"10"]}
{"104K":["0.1";"100000";"100"]}
{"105K":["1";"1000000";"1000"]}
{"109K":["0.000001";"1";"1"]}
{"120K":["0.000012";"12";"12"]}
como faço isso com sed ou outro comando unix?
Eu tenho um monte de diretórios que contêm arquivos MP3 dentro. Esses diretórios não contêm nenhum outro diretório dentro.
Como excluo toda a estrutura de diretórios sem excluir os arquivos?
Isso seria basicamente mover todos os arquivos encontrados dentro desses diretórios para o diretório atual. O diretório atual é o diretório onde estão os outros diretórios.
Eu tenho esse script que extrai um quadro de vários mp4vídeos e os armazena comopng
for i in *.mp4; do
[ -f "$i" ] || break
number=$(echo "$i" | grep -o -E '[0-9]+')
name=frame"$number".png
ffmpeg -i "$i" -ss 00:01:00.000 -vframes 1 "$name"
done
os vídeos são nomeados como video1.mp4, video2.mp4, etc. Como o loop tira os vídeos fora de ordem, extraio o número do vídeo para gerar o nome do arquivo de saída.
Isso está funcionando muito bem, mas os nomes dos pngarquivos são assim:
frame1?4.png, frame3?4.png, frame3?4.png...
por que o ?4?
ah, vejo agora que o 4 vem do 4 no mp4. Como faço para obter apenas o primeiro número?
Tenho um servidor com muitos redirecionamentos de domínio que desejo verificar.
Não confio na maneira como os navegadores armazenam os domínios em cache, por isso nunca tenho certeza se estou vendo isso ao vivo ou vendo um redirecionamento do cache.
Existe uma maneira de testar o redirecionamento do terminal e ver a coisa real sem nenhum tipo de cache?
eu tentei
curl -I http://example.com
conforme declarado em outras postagens, mas não está fornecendo nenhuma informação importante no meu Mac.
Dá-me isto:
HTTP/1.1 406 Not Acceptable
Date: Mon, 29 Jan 2018 18:26:50 GMT
Server: Apache
Content-Type: text/html; charset=iso-8859-1
Eu tenho um arquivo txt como este
AAAAAAAAAA
BBBBBBBBBB
CCCCCCCC
DDDDDDDDDDD
EEEEEEEEEEE
FFFFFFFFFFF
GGGGGGGGGGG
HHHHHHHHHHH
IIIIIIIIIII
grupos de 3 linhas com uma alimentação de linha entre eles.
Quero inverter as duas primeiras linhas de cada grupo, deixando o arquivo assim
BBBBBBBBBB
AAAAAAAAAA
CCCCCCCC
EEEEEEEEEEE
DDDDDDDDDDD
FFFFFFFFFFF
HHHHHHHHHHH
GGGGGGGGGGG
IIIIIIIIIII
como faço isso no terminal?
EDIT: carreguei uma amostra do meu arquivo de texto aqui, se você precisar testar sua resposta.
Estou tentando usar /etc/hostsno meu mac para bloquear sites de lixo infames como mackeeper.come com-cleaner.systemsde carregar novamente em pop-ups.
Enquanto fazia isso, encontrei estas entradas no meu hostsarquivo:
##
# Host Database
#
# localhost is used to configure the loopback interface
# when the system is booting. Do not change this entry.
##
127.0.0.1 localhost
255.255.255.255 broadcasthost
::1 localhost
então eu adicionei estes...
127.0.0.1 mackeeper.com
127.0.0.1 www.mackeeper.com
127.0.0.1 mackeeperapp.zeobit.com
127.0.0.1 mackeeperapp2.mackeeper.com
127.0.0.1 *.mackeeper.com
127.0.0.1 activate.adobe.com
127.0.0.1 practivate.adobe.com
127.0.0.1 *.com-cleaner.systems
127.0.0.1 *.bet.pt
e todos esses sites continuam a carregar bem, mesmo após uma reinicialização.
Também tentei adicionar as mesmas linhas com fe80::1%lo0e ::1sem sucesso.
Alguma ideia?
Eu tenho um arquivo que está usando a notação unix para finais de linha e outro que está usando a notação do Windows.
Quando eu vio arquivo unix, não vejo nada no final da linha. Quando eu vio arquivo do windows eu vejo ^Mem azul
O problema é que, do meio para baixo, as linhas contêm não ^Mem azul (??).
Estou tentando converter o arquivo inteiro para ter ^Mem todas as linhas.
Eu tentei muitos comandos, mas este em particular
sed -e 's/$/^M/' < input.txt > output.txt
adicione "^M" como dois caracteres, não como Command-Me faz isso também nas linhas que já possuem o ^Mcaractere correto...
eu também tentei
sed -e 's/\r/^M/' < input.txt > output.txt
e
sed -e 's/\n/^M/' < input.txt > output.txt
sem sucesso...
emitindo um cat -e input.txt, vejo isso nas ^M linhas corretas:
1895;2;3;5;10;14;34^M$
1896;3;6;14;15;21;25^M$
1897;9;22;25;47;52;58^M$
1898;12;34;45;53;55;58^M$
e isso nas incorretas
1899;20;23;35;36;44;48$
1900;8;11;27;28;43;46$
1901;11;12;26;30;37;53$
1902;02;07;09;18;21;25$
1903;09;10;15;28;43;45$
Como obtenho todas as linhas com o comando-m?
Eu tenho um arquivo que é assim
0001;4;5;30;33;41;52
0002;9;37;39;41;43;49
0003;10;11;29;30;36;47
0004;1;5;6;27;42;59
0005;1;2;6;16;19;46
0006;7;13;19;22;40;47
0007;3;5;20;21;38;56
... etc
O primeiro número é um contador e os seis seguintes são números de 1 ou 2 dígitos.
O arquivo tem milhares de linhas como esta. Começa em 1 e vai até 9999.
Existe uma maneira de verificar se há uma linha faltando? Quero dizer, se todos os números estiverem presentes desde o da primeira linha até o da última linha?
quero dizer assim:
0001;4;5;30;33;41;52 // first line
0002;9;37;39;41;43;49
0003;10;11;29;30;36;47
...
9999;3;4;8;12;55;88 // last line
falta alguma linha entre 0001 e 9999?
Suponha isto:
0001;4;5;30;33;41;52
0002;9;37;39;41;43;49
0003;10;11;29;30;36;47
0004;1;5;6;27;42;59
0006;7;13;19;22;40;47
Vejo? 0005 está faltando.
Como bônus, seria bom verificar se todos os sete números são delimitados por ;e não por qualquer outro caractere.
Obrigado