O problema urgente de ler a entrada do teclado no pipeline é resolvido pela resposta em https://stackoverflow.com/questions/15230289/read-keyboard-input-within-a-pipelined-read-loop :
mycommand-outputpiped | while read line
do
# do stuff
read confirm < /dev/tty
done
Por que funciona? Não ttyredireciona para a entrada padrão? Posso obter um descritor de arquivo /dev/ttye usá-lo read -u fdem vez disso? TIA
Sou novo em trabalhar com SO e unix, estou tentando criar usuários separados para um aplicativo, nginx, etc... e para executar o processo em nome deles. No momento, estou depurando as seguintes maneiras de executar o comando, e não consigo descobrir exatamente o que está realmente acontecendo ao usar os comandos runuser -u username e su username.
ATUALIZAÇÃO (agradecimento a @Kusalananda)
Certo, o que há de errado com as permissões?
root@someuser:/somehome# runuser -u app "source /etc/app/secrets/env; /somehome/way/app &" &
[4] 479621
root@someuser:/somehome# runuser: failed to execute source /etc/app/secrets/env; /somehome/way/app &: Permission denied
^C
[4] Exit 1 runuser -u app "source /etc/app/secrets/env; /somehome/way/app &"
root@someuser:/somehome#
root@someuser:/somehome#
root@someuser:/somehome# ls -ld /etc/app/secrets/env
-r-------- 1 app nogroup 1126 Apr 1 15:15 /etc/app/secrets/env
root@someuser:/somehome# ls -ld /etc/app/secrets
drwx------ 2 app nogroup 4096 Apr 1 15:15 /etc/app/secrets
root@someuser:/somehome# ls -ld /somehome/way/app
-rwxrw-r-- 1 app someuser 348528086 Mar 31 22:23 /somehome/way/app
root@someuser:/somehome# ls -ld /somehome/way/
drwxr-xr-x 3 someuser someuser 4096 Apr 1 09:30 /somehome/way/
ou agora estou tentando correr assim:
runuser --pty -u app -- bash "source /etc/app/secrets/env && /somehome/way/app &"
bash: source /etc/app/secrets/env && /somehome/way/app &: Permission denied
A primeira (pergunta original): O problema era $(), graças a @Kusalananda
Quero ressaltar que executo conscientemente, por exemplo, um aplicativo da web como um processo em segundo plano.
Vá direto ao ponto. Eu executo aplicações/comandos assim:
runuser -u someapp $(source /etc/someapp/secrets/env; /someapp)
su nginx source /etc/someapp/secrets/env && sleep 90s &
Eventualmente, eu verifico ps aux ou ps -A e vejo: app ou os comandos "sleep" estão sendo executados como root!? O que estou fazendo errado? Ou o que não entendi?
PS Mas executando este comando eu obtenho o que eu esperava:
runuser -u testappuser2 sleep 30s &
#ps output
root 462265 0.0 0.4 9376 4224 pts/1 S 18:20 0:00 runuser -u testappuser2 sleep 30s
testapp+ 462270 0.0 0.1 5684 1920 pts/1 S 18:20 0:00 sleep 30s
Considere o seguinte script:
#!/bin/bash
foo=Hello
bar=Word
cat <<EOF
No quotes single word delimiter expands
$foo
$bar
EOF
cat <<'EOF'
Single-quoted single word delimiter does not expand.
$foo
$bar
EOF
cat <<"EOF"
Double-quoted single word delimiter does not expand.
$foo
$bar
EOF
cat <<EOF\ SOME\ MORE
Unquoted multi-word word delimiter does not expand.
Can we get it to expand?
$foo
$bar
EOF SOME MORE
No último caso, estou usando um delimitador multipalavra, sem aspas, mas a saída é a seguinte:
Unquoted multi-word word delimiter does not expand.
Can we get it to expand?
$foo
$bar
Existe uma maneira de fazer o bash expandir variáveis ao usar um delimitador heredoc de várias palavras?
A referência da Expansão da História do GNU não tem exemplos, então não sei se isso é possível.
Aqui está o que eu quero fazer. Eu corri cat long/path/to/file1.txt | less, então eu corri vim file2.txt. Usando a expansão do histórico, eu gostaria de correr, cat even/longer/path/to/file3.txt | lessmas não quero:
long/path/to/file1.txt, pois é inconveniente digitar.!cat..., mas não!-2...Isso pode ser feito?
Aqui está o que eu tentei (não funciona):
!cat:^!cat:1^even/longer/path/to/file3.txt^
Aqui está meu processo de pensamento:
!cat- Substitua o último comando que começou com a string cat.:^x^y^- Substitua xpor yneste comando
!cat:1- Expandir para o primeiro argumento do último catcomando, ou seja,long/path/to/file1.txteven/longer/path/to/file3.txt– A substituição desse texto expandidoUm motivo óbvio para isso não funcionar é que estou aninhando expansões em expansões: !cat:1é interpretado como uma string literal.
Recebo esta saída:
long/path/to/file1.txtlong/path/to/file1.txteven/longer/path/to/file3.txt^: No such file or directory
Estou tentando escrever um script bash para baixar todos os vídeos de uma playlist pública do YouTube. Aqui está o que tenho até agora:
#!/bin/bash
# Default values
decode_video=true
output_format="avi"
audio_codec="libmp3lame"
audio_bitrate="192k"
audio_sample_rate="44100"
audio_channels="2"
video_codec="libxvid"
video_quality="3"
# Function to download and convert each video
download_and_convert() {
local video_url="$1"
local output_name="$2"
# Show download start message
echo "Downloading: $output_name.mp4..."
# Download the video
yt-dlp --progress -f "bv*+ba/b" --merge-output-format mp4 "$video_url" -o "$output_name.mp4"
# Show download end message
echo "Downloaded: $output_name.mp4"
# Check if video should be re-encoded
if $decode_video; then
# Debug: Output the values of the variables
echo "output_name: \"$output_name\""
echo "video_codec: $video_codec"
echo "video_quality: $video_quality"
echo "audio_codec: $audio_codec"
echo "audio_sample_rate: $audio_sample_rate"
echo "audio_bitrate: $audio_bitrate"
echo "audio_channels: $audio_channels"
# Re-encode video to MPEG-4 (Xvid) and convert audio to MP3
echo "Converting video to MPEG-4 (Xvid) and audio to MP3..."
# Ensure that the script runs the command directly without any prompt
ffmpeg -hide_banner -i "$output_name.mp4" -c:v libxvid -qscale:v 3 -c:a libmp3lame -ar 44100 -b:a 192k -ac 2 "$output_name.avi"
else
# Copy the video and only convert audio
echo "Copying video and converting audio to MP3..."
ffmpeg -i "$output_name.mp4" -c:v copy -c:a $audio_codec -ar $audio_sample_rate -b:a $audio_bitrate -ac $audio_channels "$output_name.$output_format"
fi
# Clean up the original MP4 file
#rm "$output_name.mp4"
echo "Converted: $output_name.$output_format"
}
# Parse command-line options
while [[ $# -gt 0 ]]; do
case $1 in
--no-decode-video)
decode_video=false
shift
;;
--decode-video)
decode_video=true
shift
;;
*)
playlist_url="$1"
shift
;;
esac
done
# Ensure playlist URL is provided
if [ -z "$playlist_url" ]; then
echo "Usage: $0 <playlist_url> [--no-decode-video]"
exit 1
fi
# Get total number of videos in the playlist
total_videos=$(yt-dlp -j --flat-playlist "$playlist_url" | jq -r '.id' | wc -l)
echo "Total videos in playlist: $total_videos"
# Download the playlist and process each video
current_video=1
yt-dlp -j --flat-playlist "$playlist_url" | jq -r '.id' | while read -r video_id; do
# Define output filename
output_name="video_$video_id"
# Show progress
echo "Processing video $current_video of $total_videos..."
# Download and convert the video
download_and_convert "https://www.youtube.com/watch?v=$video_id" "$output_name"
# Increment video counter
current_video=$((current_video + 1))
done
echo "All videos processed successfully!"
Agora, o download de vídeos funciona, mas a conversão ffmpegfalha. Ele começa a mostrar a saída regular ffmpeg, como se estivesse convertendo corretamente, e então mostra: Parse error, at least 3 arguments were expected, only 1 given in string 'GC1Y0'. O que pode ser? Li em um tópico diferente que há um problema ao citar nomes de arquivos.
Estou interessado em analisar 50 conjuntos de dados diferentes com um script e salvar a saída de cada uma das 50 análises em 50 diretórios correspondentes diferentes. Para evitar fazer isso manualmente, como isso poderia ser feito de forma automatizada, ou seja, em 'modo batch'?
Para executar, o script usa um conjunto de executáveis, todos os quais residem em um diretório chamado 'Programas', e também requer um arquivo de parâmetro de entrada. Cada conjunto de dados na verdade consiste em dois arquivos (infile.ped e infile.map). Aprendi, por meio de uma pergunta que fiz anteriormente ( Como salvar a saída de cada iteração de um comando de loop em uma nova pasta diferente? ), que se eu quisesse executar 50 execuções de replicação para um único conjunto de dados, uma solução seria:
for dir in dir{01..50}; do
mkdir -p "$dir" &&
ln -sf ../{script.sh,infile.{ped,map},INPUT_PARAMETERS_FILE,PROGRAMMES} "$dir" &&
(cd "$dir" && exec bash ./script.sh infile)
done
Minha pergunta aqui é como esse loop poderia ser adaptado ao caso em que, em vez de um único conjunto de dados, o objetivo é analisar automaticamente, por exemplo, 50 conjuntos de dados diferentes (infile_1.ped e infile_1.map; infile_2.ped e infile_2.map; ...; infile_50.ped e infile_50.map).
Eu instruí meu emulador de terminal a enviar "\u{85}" (caractere de controle C1 "NEXT LINE" (NEL)) pelo pipe para ser capturado pelo bash:
bind -x '"\u0085":"echo Hello"'
Mas isso não aciona nada. Então minha primeira pergunta é: Como eu represento pontos de código unicode para bind -x? Estranhamente, o bash pega a representação octal:
bind -x '"\205":"echo Hello"'
Em qualquer caso, o acima cria artefatos estranhos no shell:
Hello
$ �Hello
Hello
$ �
Imaginei que o caractere de controle provavelmente tem alguns efeitos colaterais. Então, minha segunda pergunta é: qual intervalo unicode posso reutilizar com segurança para meu próprio bem?
Dados de entrada:
id,location_id,name,title,[email protected],department
1,1,Susan houston,Director of Services,[email protected],
2,1,Christina Gonzalez,Director,[email protected],
3,2,Brenda brown,"Director, Second Career Services",[email protected],
4,3,Howard Lader,"Manager, Senior Counseling",[email protected],
8,6,Bart charlow,Executive Director,[email protected],
9,7,Bart Charlow,Executive Director,[email protected],
Preciso adicionar um caractere para duplicar e-mails após a parte do e-mail, ou seja, [email protected] se tornaria [email protected] (o dígito após a parte do e-mail precisa ser retirado da segunda coluna). Como posso fazer isso no Bash para todas as entradas?
Imagino que seja um problema simples, mas não tenho ninguém para verificar meu trabalho.
Aqui está meu script bash
#!/bin/bash
# establish date format and dump name
DATE=$(date +"%Y%m%d-%H%M")
DUMPFILE=$DATE.dump
# path to log dir and name of output log file
LOGDIR=/opt/mongodb/backups/logs
DBLOG=$DATE-dump.log
# backup the database and output to a dump file, redirect output to a log
docker exec -i mongodb sh -c "mongodump --archive" > \
$DUMPFILE 2> \
$LOGDIR/$DBLOG
# archive the dump file and the file uploads
ARCHIVENAME=$DATE.tgz
ARCHIVELOG=$DATE-archive.log
tar -czvf $ARCHIVENAME /opt/mongodb/$DUMPFILE /opt/mongodb/files &> \
$LOGDIR/$ARCHIVELOG
Onde estou preso, o script emite corretamente o log de despejo. No entanto, quando chega ao fim, recebo
./backup.sh: line 20: /opt/mongodb/backups/logs/20250328-0942-archive.log: No such file or directory
Tentei usar o caminho absoluto em vez do da var:
tar -czvf $ARCHIVENAME /opt/mongodb/$DUMPFILE /opt/mongodb/files &> \
/opt/mongodb/backups/logs/$ARCHIVENAME
Mas recebo o mesmo erro. Estou supondo que isso seja meu entendimento ruim de redirecionamentos, tar ou um erro de sintaxe. Qualquer ajuda seria apreciada.
EDIT: Um arquivo chamado "' '" é criado toda vez que executo o script. Se executado
cat ' '
Vejo que esse arquivo é o log, então ele redireciona a saída para um arquivo, mas não da maneira desejada.
Estou usando uma caixa de diálogo para modificar um único valor em um arquivo:
#!/usr/bin/env bash
prompt_and_save() {
local file=$1
local message=$2
local value=""
# Check if file exists and read value
if [ -f "$file" ]; then
value=$(cat "$file")
fi
# Prompt user with dialog
value=$(dialog --inputbox "$message" 8 50 "$value" 3>&1 1>&2 2>&3)
# Save the value if not empty
if [ ! -z "$value" ]; then
echo "$value" > "$file"
fi
clear
# Return the value
echo "$value"
}
UPSTREAM_VERSION=$(prompt_and_save "VERSION" "Bump the version (or keep it the same)")
clear
NEW_ENTRY="# Version $UPSTREAM_VERSION $DATE"
RELEASE_NOTES=$(cat RELEASE_NOTES)
echo -e "$NEW_ENTRY\n${RELEASE_NOTES}" > test.md
Mas executando este script eu chego test.mdnestes valores:
# Version ^[[H^[[2J^[[3J0.2.0
1. Split codebase into multiple files.
2. Use a seperate version file and define built version upon compile.
4. [BUGFIX] If input file is same as output file copy input file into a temporary one.
5. Improved Documentation
6. [BUGFIX] Out of bounds argument parsing
7. [BUGFIX] Values should not be an Argument
Como posso remover quaisquer caracteres de controle UPSTREAM_VERSIONanteriores echoa ele no arquivo?