Philip Kirkbride's questions

Estou procurando soluções para converter JSON em CSV. Parece que a maioria das soluções espera que o JSON seja um único objeto em vez de uma matriz de objetos.

Todas as soluções que tentei daqui parecem quebrar com minha entrada, que vem da ondulação deste site .

Como posso converter o JSON em um CSV com jqou outra ferramenta quando a entrada é uma matriz em vez de um objeto.

[
  {
    "id": "4",
    "link": "https://pressbooks.online.ucf.edu/amnatgov/",
    "metadata": {
      "@context": "http://schema.org",
      "@type": "Book",
      "name": "American Government",
      "inLanguage": "en",
      "copyrightYear": "2016",
      "disambiguatingDescription": "The content of this textbook has been developed and arranged to provide a logical progression from the fundamental principles of institutional design at the founding, to avenues of political participation, to thorough coverage of the political structures that constitute American government. The book builds upon what students have already learned and emphasizes connections between topics as well as between theory and applications. The goal of each section is to enable students not just to recognize concepts, but to work with them in ways that will be useful in later courses, future careers, and as engaged citizens. ",
      "image": "https://pressbooks.online.ucf.edu/app/uploads/sites/4/2020/01/American-Government.png",
      "isBasedOn": "https://ucf-dev.pb.unizin.org/pos2041",
      "author": [
        {
          "@type": "Person",
          "name": "OpenStax"
        }
      ],
      "datePublished": "2016-01-06",
      "copyrightHolder": {
        "@type": "Organization",
        "name": "cnxamgov"
      },
      "license": {
        "@type": "CreativeWork",
        "url": "https://creativecommons.org/licenses/by/4.0/",
        "name": "CC BY (Attribution)"
      }
    },
    "_links": {
      "api": [
        {
          "href": "https://pressbooks.online.ucf.edu/amnatgov/wp-json/"
        }
      ],
      "metadata": [
        {
          "href": "https://pressbooks.online.ucf.edu/amnatgov/wp-json/pressbooks/v2/metadata"
        }
      ],
      "self": [
        {
          "href": "https://pressbooks.online.ucf.edu/wp-json/pressbooks/v2/books/4"
        }
      ]
    }
  }
]

Formato Desejado:

id, link, context, type, name, inLanguage, image, author_type, author_name, license_type, license_url, license_name

Estou experimentando alterar PS3, espero que o script a seguir faça com que o novo valor seja mostrado quando executado:

select i in red blue green exit
do
  case $i in
    red) echo "Red";;
    blue) echo "Blue";;
    green) echo "Green";;
    exit) exit;;
  esac
done

Então eu mudo o valor do PS3.

PS3=">"

Mas quando executo o script, o padrão #?é usado.

Não tenho certeza do que estou perdendo, existe um limite para quais valores podem ser usados?

Estou assistindo a um vídeo sobre menos pipe e o criador consegue abrir arquivos de imagem e recuperar vários metadados:

Meu sistema parece ter menos pipe e posso visualizar PDFs e arquivos compactados com less, mas não recebo nenhum meta-dado ao abrir uma imagem. Eu só recebo uma única linha como abaixo.

Eu notei no vídeo que diz ffmpegna parte inferior e eu tenho instalado. Existe algum tipo de configuração que eu possa alterar para lessmostrar mais detalhes para as imagens?

Comando usado para verificar se menos pipe está instalado:

echo $LESSOPEN

Comando usado para abrir a imagem:

less image.jpg

Eu sempre assumi que qualquer coisa que fosse definida no padrão posix estaria na maioria das distribuições Linux comuns.

No entanto, quando pesquisei quais utilitários são padrão no padrão posix, encontrei esta página com uma longa lista .

Depois de experimentar alguns dos quais eu não tinha ouvido falar muito, notei rapidamente que muitos não parecem estar instalados no meu sistema.

Talvez os utilitários sejam nomeados de forma diferente? Por exemplo, eu não tenho c99no meu sistema, mas tenho o ccque suponho que possa compilar como arquivos c99.

Outros utilitários que tentei, mas não parecem estar no meu sistema:

• what
• uux
• qalter
• renice
• sact

Eu tentei apenas um punhado de comandos que pareciam desconhecidos, mas acho que muitos mais não estão no meu sistema.

Esses utilitários são opcionais?

Eu estava lendo sobre atalhos de teclado no Bash. Eles parecem ser baseados no Emacs, mas oferecem a capacidade de alternar para vios baseados.

Você pode fazer set -o vino seu .bashrcefeito Bash, mas vi que também havia uma opção para editar um arquivo chamado .inputrcadicionando a seguinte linha:

set editing-mode vi

Ao editar .inputrcem vez de .bashrctodos os programas que usam a GNU Readline Library, mudará para viatalhos de teclado.

Provavelmente não vou mudar as ligações, pois estou acostumado com as do Emacs agora e gosto de usar os padrões, mas esse fato me deixou curioso sobre o GNU Readline e o .inputrc. Quais utilitários e programas populares fazem uso desta biblioteca?

Estou usando JQpara buscar algum JSON de um banco de dados de quiz e quero analisar os resultados. Estou tentando salvar uma matriz resultante no Bash, conforme mostrado abaixo, mas o formato é usado em JavaScript/Python com colchetes em vez do estilo Bash.

quiz=$(curl -s https://opentdb.com/api.php?amount=3)
answers=$(echo $quiz | jq '[ .results][0][0].incorrect_answers')
correct=$(echo $quiz | jq '[ .results][0][0].correct_answer')
answers+=( $correct )

Um exemplo de como as respostas se parecem está abaixo:

[ "Excitement", "Aggression", "Exhaustion" ]

A resposta correta nunca é enviada para a matriz devido ao formato errado.

Como posso converter um array do formato mostrado acima para que seja interpretado no meu script como um array.

Exemplo de saída de curl (isso não é codificado, pergunta e resposta são sempre diferentes) :

{
  "response_code": 0,
  "results": [
    {
      "category": "Entertainment: Television",
      "type": "multiple",
      "difficulty": "easy",
      "question": "Which company has exclusive rights to air episodes of the "The Grand Tour"?",
      "correct_answer": "Amazon",
      "incorrect_answers": [
        "Netflix",
        "BBC",
        "CCTV"
      ]
    },
    {
      "category": "Celebrities",
      "type": "multiple",
      "difficulty": "medium",
      "question": "How much weight did Chris Pratt lose for his role as Star-Lord in "Guardians of the Galaxy"?",
      "correct_answer": "60 lbs",
      "incorrect_answers": [
        "30 lbs",
        "50 lbs",
        "70 lbs"
      ]
    },
    {
      "category": "Animals",
      "type": "boolean",
      "difficulty": "easy",
      "question": "The Killer Whale is considered a type of dolphin.",
      "correct_answer": "True",
      "incorrect_answers": [
        "False"
      ]
    }
  ]
}

Eu tenho um arquivo cujo conteúdo é semelhante ao seguinte.

0
0
0.2
0
0
0
0

Eu preciso remover todas as linhas com um único zero.
Eu estava pensando em usar grep -v "0", mas isso remove também a linha contendo 0.2. Eu vi que poderia usar a -wopção, mas isso também não parece funcionar.

Como posso remover todas as linhas contendo apenas um único 0 e manter todas essas linhas começando com 0?

Eu exportei meu arquivo de e-mail de 10 anos, que é muito grande.

Eu quero analisar todo o texto para qualquer string com 64 caracteres em busca de uma chave privada bitcoin.

Como posso analisar strings de um determinado comprimento em caracteres?

Eu tenho a seguinte estrutura ( exemplo de arquivo completo aqui ):

{
  {
    "weather": [
      {
        "advertiser": "Worldwide Forecasts",
        "notificationText": "Weather - Check the Weather Now - Weather",
        "notificationURL": "http://www.worldwideforecasts.com/b/index.html?aff_sub=NL01R15178755321634q5X2zHqXo1976US&utm_term=weather&utm_campaign=bing&utm_content=new-weather%20-%20Weather%20-%202&utm_medium=Search_SEM&utm_source=7&nlhash=BR6et8ISl5dCdAHF&requestId=NL01R15178755321634q5X2zHqXo1976US",
        "uuid": "9f27d258-f9d5-4b19-9f70-291eb9cbab51",
        "creativeSetId": "2799cbab-1fa1-4f15-bbc9-c92381dbfc57"
      },
      {
        "advertiser": "Worldwide Forecasts",
        "notificationText": "Weather - Check the Weather Now - Weather",
        "notificationURL": "http://www.worldwideforecasts.com/b/index.html?aff_sub=NL01R15178755321634q5X2zHqXo1976US&utm_term=weather&utm_campaign=bing&utm_content=new-weather%20-%20Weather%20-%202&utm_medium=Search_SEM&utm_source=7&nlhash=BR6et8ISl5dCdAHF&requestId=NL01R15178755321634q5X2zHqXo1976US",
        "uuid": "9f27d258-f9d5-4b19-9f70-291eb9cbab51",
        "creativeSetId": "2799cbab-1fa1-4f15-bbc9-c92381dbfc57"
      }
    ]
  }
}

Com várias categorias como o weatherexemplo.

Quero usar jqpara obter uma lista de todos os valores de notificationURLpara que fique com uma lista de URLs de todos os anunciantes.

Eu estava inicialmente pensando que poderia fazer algo como:

cat file.json | jq .[].[].notificationURL

Mas isso não funciona.

Baixei um arquivo codificado em RTTY 45,45 baud (saída mp3 do vídeo vinculado). Não tenho certeza se a saída final deve ser áudio ou texto.

Também instalei o minimodemque estou lendo pode converter dados em áudio com opção --txe sair com --rx.

Por exemplo, converter uma imagem em áudio e voltar com:

cat pic.jpg | minimodem --tx 9600 -f audio.wave

minimodem --rx 9600 -f audio.wave > pic2.jpg

Eu tentei os dois comandos a seguir, um esperando saída de áudio e outro esperando texto:

minimodem --rx rtty -f youtube.mp3 > out.mp3

minimodem --rx rtty -f youtube.mp3 > out.txt

Nenhum destes parece funcionar.

Alguém pode me aconselhar sobre como decodificar essa história?

Eu tenho o arquivo groff para gerar um pdf no formato:

.TL
Article title
.AU
Author name
.AI
Publication title
.SH
.LP
First paragraph
.PP
More paragraphs

Estou então correndo groff -ms a.ms -T pdf > a.pdfpara gerar um pdf. Gosto de como o groff facilita a formatação, mas gostaria de saber se seria possível incluir um diagrama ascii.

Por exemplo o seguinte:

 +-------------------------+             +-----------------+
 |                         |             |                 |
 |      Hello              |             |                 |
 |                         +-------------+                 |
 |                         |             |                 |
 +-------------------------+             +-----------------+

Se a entrada como um parágrafo normal se transformar em:

Existe alguma maneira de inserir uma seção no groff que preserve os espaços para que esse tipo de diagrama possa ser usado?

Olhando o manual paragroff_ms eu vejo:

.PS e .PE Indica um gráfico, a ser processado pelo pré-processador pic. Você pode criar um arquivo pic manualmente, usando o manual pic AT&T disponível na Web como referência, ou usando um programa gráfico como o xfig.

Mas isso parece aceitar apenas marcação de linguagem pic .

Existe alguma maneira que eu possa inserir desenhos assci no groff?

Eu tenho um script que chama vários outros subscripts. Mais tarde, é morto e isso parece matar todos os subscripts.

Na maioria das vezes é isso que eu quero. Mas há um ou dois casos em que não quero que uma criança morra.

Acho que me lembro de ser capaz de impedir que isso acontecesse colocando em segundo plano um &ao chamar um script.

alguém pode confirmar isso?

Eu tenho um pacote debian que estou executando na inicialização.

Estou usando o upstart e acho que preciso adicionar uma dependência à configuração do upstart:

start on someProgram

Não tenho certeza de qual programa, mas não estou usando network-manager, está desativado. Estou fazendo algo assim:

ethernet=$(ifconfig -a | grep Ethernet | grep ^e | cut -d' ' -f1)
wifi=$(ifconfig -a | grep wl | cut -d' ' -f1)
ping -I $ethernet -c 1 8.8.8.8 \
  || ping -I $wifi -c 1 8.8.8.8 \
  || echo "not online"

O problema ifconfignem sempre mostra a $wifiinterface porque o programa foi ativado muito cedo no processo de inicialização.

Também ping -I $ethernet -c 1 8.8.8.8falha quando deveria ter sucesso.

Se eu fizer sleep 30isso ping, funcionará bem.

Alguém sabe que pacote devo esperar para que isso funcione como esperado?

Estou usando o Ubuntu 14.04 em um dispositivo incorporado.

3.0.36+ #16 SMP PREEMPT Tue Oct 31 19:17:57 EDT 2017 armv7l armv7l armv7l GNU/Linux

Achei que tinha uma resposta:

Estou descobrindo que as interfaces de rede podem ser referenciadas diretamente em vez de um pacote:

start on (local-filesystems and net-device-up IFACE!=lo)

Eu ainda gostaria de melhorá-lo um pouco para o meu caso.

Como prefiro esperar por wlan do que por eth, mas não tenho certeza se posso usar um curinga como:IFACE=wlan*

Mas parece que isso não espera que a interface esteja disponível, em ifconfigvez disso, espera que essa interface tenha uma conexão ativa com a Internet.

Eu quero fazer algo como:

command || log $error_from_last_command

Existe uma maneira de usar ||e ainda acessar stderrcomo um cachimbo?

Minha intenção aqui é processar a mensagem de erro de command, usando log, mas somente se commandfalhar. Estou lendo a duplicata marcada, mas não vejo como aplicar isso à minha situação.

Como posso converter palavras separadas por sublinhado em "camelCase"? Aqui está o que estou tentando:

echo "remote_available_packages" | sed -r 's/([a-z]+)_([a-z])([a-z]+)/\1\U\2\L\3/'

Mas ele retorna remoteAvailable_packagessem alterar o pin packages.

Se eu correr:

apt-get install --dry-run 2klic-embedded-gui=*-master

Eu recebo:

Reading package lists... Done
Building dependency tree       
Reading state information... Done
2klic-embedded-gui is already the newest version.
Selected version '3.1.0-8-master' (all 2klic-updates:2klic-updates [all]) for '2klic-embedded-gui'
0 upgraded, 0 newly installed, 0 to remove and 182 not upgraded.

Estou tentando:

apt-get install --dry-run 2klic-embedded-gui=*-master 2>&1 | grep gui

O que não retorna nada. Então eu tento stdbuf:

stdbuf -oL -eL apt-get install --dry-run 2klic-embedded-gui=*-master 2>&1 | grep gui

Isso retorna a linha 4, mas estou esperando as linhas 4 e 5.

Por que a linha 5 não é redirecionada para grep?

Estou usando o awk com uma variável para cortar arquivos de log com base em um carimbo de data/hora:

LAST_LOG=$last_log awk 'index($0, ENVIRON["LAST_LOG"]) {y=1;next};y' $log_file ;

Se a data ainda existir no arquivo de log, funcionará, mas se o arquivo de log tiver sido arquivado e substituído por um arquivo novo awk, falhará.

Eu quero voltar para cat $log_filese awkfalhar:

LAST_LOG=$last_log awk 'index($0, ENVIRON["LAST_LOG"]) {y=1;next};y' $log_file ; \
  || cat $log_file

Mas essa sintaxe retorna syntax error near unexpected token ||.

A linha acima não é uma função normal que posso usar &&ou ||depois?

Eu quero suprimir erros em meu sub-shell depois de um certo ponto.

Eu escrevi um script para demonstrar a situação:

worked=false
(echo Starting subshell process \
    && echo If this executes process is considered success \
    && false \
    && echo run if possible, but not an error if failed) \
  && worked=true

echo $worked

Quero relatar ao shell externo que o processo funcionou.

Também pensei em colocar a variável trabalhada dentro do subshell:

    && echo This works process worked: \
    && worked=true \
    && false \
    && echo run if possible, but not an error if failed)

Mas isso também não funciona porque definir uma variável dentro do subshell não afeta o script principal.

Estou trabalhando em uma configuração de Makefile para criar um pacote debian:

.PHONY: package
package: $(PACKAGE_TARGETS)

build/%.changes: ../%.changes
        mkdir -p build
        for f in `<$< awk 'BEGIN { files = 0; } { if (files) print $$5; } /^Files:/ { files = 1; }'`; do \
            test -f build/$$f || mv ../$$f build/; \
        done
        mv $< $@

../%.changes:
        dpkg-buildpackage -rfakeroot -b -uc

Tudo estava funcionando bem com a compilação até que fiz um commit muito pequeno. O que adiciona um arquivo executável em /src/bin/app-cli. Em seguida, faça referência a esse executável no arquivo de instalação do debian debian/app.install:

src/bin/app-cli usr/local/bin

Por algum motivo, fazer essa alteração fez com que o sistema de compilação gerasse o erro:

dh_usrlocal: debian/app/usr/local/bin/app-cli is not a directory
rmdir: failed to remove 'debian/app/usr/local/bin': Directory not empty
dh_usrlocal: rmdir debian/app/usr/local/bin returned exit code 1
make[1]: *** [binary] Error 1
make[1]: Leaving directory `/var/lib/jenkins/data/workspace/app-VBJPWWOTACEEMDGNNWMFS4QU6K4EPG5PJRESMEIZPZL4GAUCKWVQ'
dpkg-buildpackage: error: fakeroot debian/rules binary gave error exit status 2
make: *** [../app_0.0.1-13-master_amd64.changes] Error 2

Alguém sabe que este novo arquivo está sendo tratado como diretório pelo Debian Helper?

Estou modificando um Makefilepara adicionar um comando que será usado para atualizar e compilar uma dependência.

Já tenho o make cleancomando funcionando. Agora estou tentando executá-lo antes de executar qualquer outro makecomando.

Estou tentando adicionar all: clean, mas não parece funcionar:

.PHONY: all
all: clean

.PHONY: clean
clean:
        rm -rf build

update-dep:
        mkdir -p build/package_name \
          && # do stuff here

Como posso executar limpo quando qualquer uma das outras funções é executada?