AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / unix / Perguntas / 529493
Accepted
R-MASHup
R-MASHup
Asked: 2019-07-11 22:42:34 +0800 CST2019-07-11 22:42:34 +0800 CST 2019-07-11 22:42:34 +0800 CST

Maneira mais simples de extrair uma parte de uma string?

  • 772

Eu tenho um arquivo (bigfile.txt), uma das colunas se parece com isso

NW_017095471.1  Gnomon  mRNA    108321  109565  .   +   .   ID=rna34;Parent=gene27;Dbxref=GeneID:108565285,Genbank:XM_017925071.1;Name=XM_017925071.1;gbkey=mRNA;gene=LOC108565285;model_evidence=Supporting evidence includes similarity to: 7 Proteins%2C and 100%25 coverage of the annotated genomic feature by RNAseq alignments%2C including 30 samples with support for all annotated introns;product=transmembrane protein 126A;transcript_id=XM_017925071.1
ID=gene27;Dbxref=GeneID:108565285;Name=LOC108565285;gbkey=Gene;gene=LOC108565285;gene_biotype=protein_coding
ID=gene28;Dbxref=GeneID:108569527;Name=LOC108569527;gbkey=Gene;gene=LOC108569527;gene_biotype=protein_coding
ID=gene78;Dbxref=GeneID:108562956;Name=LOC108562956;gbkey=Gene;gene=LOC108562956;gene_biotype=protein_coding

Eu tenho uma lista separada:

gene27
gene28

Eu quero pegar cada linha e grep o campo ID e depois retornar o 'LOC#' que segue "Name=".

gene=$line
`grep $gene";" bigfile.txt | sed -e 's/Name=

Para retornar

LOC108565285
LOC108569527

Como faço para extrair apenas essa parte?

awk sed
  • 7 7 respostas
  • 744 Views

7 respostas

  • Voted
  1. Kusalananda
    2019-07-11T23:14:10+08:002019-07-11T23:14:10+08:00

    Supondo que este seja o 9º campo delimitado por tabulação de um arquivo GFF (o campo "atributos"), você pode extrair o valor do geneatributo correspondente a um IDatributo específico (lido de um arquivo separado) assim com awk:

    BEGIN { FS = "\t" }
    
    FNR == NR {
        # Read IDs into a hash as keys.
        ids[$1] = 1
        next
    }
    
    $3 == "gene" {
        # Split the attribute field into separate key-value pairs.
        n = split($9, keyvalues, ";")
    
        id = ""    # Not found a gene ID yet
        gene = ""  # No gene name to print
    
        # Loop over the key-value pairs, split them on the "="
        # and extract the gene name and gene ID.
        for (i = 1; i <= n; ++i) {
            split(keyvalues[i], attr, "=")
            if (attr[1] == "ID") {
                if (attr[2] in ids)
                    id = attr[2]
                else
                    next  # This line is not of interest
            }
            else if (attr[1] == "gene")
                gene = attr[2]
        }
    
        if (id != "" && gene != "")
            print gene
    }
    

    Executando isso em um arquivo GFF chamado file.gffcontendo os dados fornecidos na coluna 9 e com a lista de ID do gene em id.list:

    $ awk -f script.awk id.list file.gff
    LOC108565285
    LOC108569527
    

    A lista de IDs de genes é lida a partir do primeiro arquivo no FNR == NRbloco no awkcódigo, enquanto o último bloco está processando o campo de atributo de linhas de recurso de gene (somente) no segundo (e todos os posteriores) arquivos fornecidos na linha de comando.

    O awkcódigo assume que os atributos IDe genedo arquivo GFF contém apenas um único valor (não uma lista de valores delimitada por vírgulas) e que os valores não são citados.

    Para obter a saída como uma lista de nomes de genes e IDs de genes (duas colunas), altere a print geneinstrução para print id, gene.

    • 2
  2. Valentin Bajrami
    2019-07-11T23:13:46+08:002019-07-11T23:13:46+08:00

    Isso precisa de refatoração, mas deve fazer o que você deseja:

    while IFS=; read -r line; do grep -Fw "$line" biffile.txt; done < other_file | awk -F';' '{split($3,a,"=");print a[2]}'
    
    • 0
  3. terdon
    2019-07-12T02:17:14+08:002019-07-12T02:17:14+08:00

    Eu usaria uma abordagem um pouco diferente. Primeiro, extraia apenas os campos ID e Nome:

    $ sed -nE 's/.*ID=([^;]*).*Name=([^;]*).*/\1 \2/p' file1
    gene27 LOC108565285
    gene28 LOC108569527
    gene78 LOC108562956
    

    Em seguida, filtre isso usando a lista de IDs de destino:

    $ cat file2
    gene27
    gene28
    $ sed -nE 's/.*ID=([^;]*).*Name=([^;]*).*/\1 \2/p' file1 | grep -wf file2 
    gene27 LOC108565285
    gene28 LOC108569527
    

    Ou, se você quiser apenas o LOC....valor, e supondo que tenha GNU grep:

    $ grep -wf file2 file1 | grep -oP 'Name=\K[^;]+'
    LOC108565285
    LOC108569527
    
    • 0
  4. Philippos
    2019-07-12T23:06:08+08:002019-07-12T23:06:08+08:00

    Seguro. Simples. Curto.

    O nome bigfile.txtsugere que não queremos fazer grep várias vezes por ele, mas fazê-lo de uma só vez. Então eu prefiro uma tentativa como @Kusalananda: colete todos os IDs de genes para extrair e depois escanear uma vez pelo arquivo bigfile. Para tal tarefa eu prefiro sed, já que você não precisa lidar com programação como variáveis, arrays e loops, apenas deixe a ferramenta fazer o trabalho:

    sed '/^gene[0-9]*$/{s/$/;/;H;d;};G;/ID=\(gene[0-9]*;\).*\n\1/!d;s/.*gene=\(LOC[0-9]*\);.*/\1/' genelist.txt bigfile.txt
    

    E aqui está a explicação:

    • /^gene[0-9]*$/é um padrão para selecionar linhas da lista: apenas genecom um número
    • {s/$/;/;H;d;}é executado apenas para as linhas acima: s/$/;/anexa a ;, Hanexa esta linha modificada ao espaço de espera e dinterrompe o processamento adicional e exclui a linha
    • Neste ponto do script, sabemos que estamos no bigfile.txte o espaço de espera é preenchido com todos os geneIDs. Agora Ganexa esta lista ao espaço padrão
    • O padrão /ID=\(gene[0-9]*;\).*\n\1/seleciona linhas onde o ID gene[0-9]*é repetido ( \1refere-se à string dentro do primeiro par de \(\)) após uma nova linha, portanto, um ID que está presente na lista
    • !dinverte a seleção e exclui, todas as linhas sem correspondência são excluídas
    • Agora, para todas as linhas com correspondência, extraia o genecampo:s/.*gene=\(LOC[0-9]*\);.*/\1/
    • 0
  5. Praveen Kumar BS
    2019-07-16T07:57:04+08:002019-07-16T07:57:04+08:00

    Feito pelo script simples abaixo

    comando

    for i in `cat file2`; do awk -v i="$i" -F ";" '$1=="ID="i{print $5}' file1| awk -F  "=" '{print $NF}'; done
    

    resultado

    LOC108565285
    LOC108569527
    
    • 0
  6. SJ7
    2020-12-26T09:07:15+08:002020-12-26T09:07:15+08:00

    Tente isso

    grep "ID=gene[0-9]" bigfile.txt |  sed 's/\;/ /g' | awk '{print $3}' | sed 's/Name=//g'
    
    • -1
  7. Best Answer
    Siva
    2019-07-11T23:04:14+08:002019-07-11T23:04:14+08:00

    Tente isso,

        grep "ID=$pattern;" file | grep -o 'Name=[^;]*' | sed 's/Name=//g';
    
    • grep -o 'Name=[^;]*'com grep o padrão começa com "Name=" e termina imediatamente ";"
    • sed 's/Name=//g';basta remover o padrão que não é necessário conforme sua exigência.
    • -2

relate perguntas

  • Como posso melhorar este script de conversão de personagens?

  • Como remover uma única linha entre duas linhas

  • Reorganize as letras e compare duas palavras

  • Embaralhamento de arquivo de várias linhas

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Possível firmware ausente /lib/firmware/i915/* para o módulo i915

    • 3 respostas
  • Marko Smith

    Falha ao buscar o repositório de backports jessie

    • 4 respostas
  • Marko Smith

    Como exportar uma chave privada GPG e uma chave pública para um arquivo

    • 4 respostas
  • Marko Smith

    Como podemos executar um comando armazenado em uma variável?

    • 5 respostas
  • Marko Smith

    Como configurar o systemd-resolved e o systemd-networkd para usar o servidor DNS local para resolver domínios locais e o servidor DNS remoto para domínios remotos?

    • 3 respostas
  • Marko Smith

    apt-get update error no Kali Linux após a atualização do dist [duplicado]

    • 2 respostas
  • Marko Smith

    Como ver as últimas linhas x do log de serviço systemctl

    • 5 respostas
  • Marko Smith

    Nano - pule para o final do arquivo

    • 8 respostas
  • Marko Smith

    erro grub: você precisa carregar o kernel primeiro

    • 4 respostas
  • Marko Smith

    Como baixar o pacote não instalá-lo com o comando apt-get?

    • 7 respostas
  • Martin Hope
    user12345 Falha ao buscar o repositório de backports jessie 2019-03-27 04:39:28 +0800 CST
  • Martin Hope
    Carl Por que a maioria dos exemplos do systemd contém WantedBy=multi-user.target? 2019-03-15 11:49:25 +0800 CST
  • Martin Hope
    rocky Como exportar uma chave privada GPG e uma chave pública para um arquivo 2018-11-16 05:36:15 +0800 CST
  • Martin Hope
    Evan Carroll status systemctl mostra: "Estado: degradado" 2018-06-03 18:48:17 +0800 CST
  • Martin Hope
    Tim Como podemos executar um comando armazenado em uma variável? 2018-05-21 04:46:29 +0800 CST
  • Martin Hope
    Ankur S Por que /dev/null é um arquivo? Por que sua função não é implementada como um programa simples? 2018-04-17 07:28:04 +0800 CST
  • Martin Hope
    user3191334 Como ver as últimas linhas x do log de serviço systemctl 2018-02-07 00:14:16 +0800 CST
  • Martin Hope
    Marko Pacak Nano - pule para o final do arquivo 2018-02-01 01:53:03 +0800 CST
  • Martin Hope
    Kidburla Por que verdadeiro e falso são tão grandes? 2018-01-26 12:14:47 +0800 CST
  • Martin Hope
    Christos Baziotis Substitua a string em um arquivo de texto enorme (70 GB), uma linha 2017-12-30 06:58:33 +0800 CST

Hot tag

linux bash debian shell-script text-processing ubuntu centos shell awk ssh

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve