AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / coding / Perguntas / 78798134
Accepted
MGP
MGP
Asked: 2024-07-26 20:48:09 +0800 CST2024-07-26 20:48:09 +0800 CST 2024-07-26 20:48:09 +0800 CST

Encontre a linha na Matriz A que está mais próxima das duas Matriz B

  • 772

Digamos que eu tenha duas matrizes A e B dadas por

set.seed(123)
m1 = matrix(runif(10*5), nrow = 10, ncol = 5)
m2 = matrix(runif(10*5), nrow = 10, ncol = 5)

Quero encontrar para cada linha da matriz A a linha da matriz B que está mais próxima da linha da matriz A. Sei que posso fazer isso percorrendo cada linha de A e comparando-a com cada linha de B assim:

for(i in 1:nrow(m1)){
  dist = 9999
  index = -1
  for(j in 1:nrow(m2)){
    test = sqrt(sum(abs(m1[i,]-m2[j,])))
    
    if (test < dist) {
      dist = test
      index = j
    }
  }
  print(index)
}

No entanto, tenho um milhão de linhas e isso leva uma eternidade. Estou lutando para encontrar uma maneira eficiente. Alguma ideia?

  • 4 4 respostas
  • 82 Views

4 respostas

  • Voted
  1. ThomasIsCoding
    2024-07-26T21:52:19+08:002024-07-26T21:52:19+08:00

    Um benchmark de acompanhamento baseado na solução de @Ronak Shah

    # Ronak Shah's original solution
    f1 <- \() {
        apply(m1, 1, \(x) which.min(sqrt(colSums(abs(x - t(m2))))))
    }
    
    # a variant to Ronak Shah's solution, by removing `sqrt` and moving `t(m2)` out of `apply`
    f2 <- \() {
        tm2 <- t(m2)
        apply(m1, 1, \(x) which.min(colSums(abs(x - tm2))))
    }
    
    # Friede's solution
    f3 <- \() {
        tm2 <- t(m2)
        collapse::dapply(X = m1, FUN = \(x) which.min(Rfast::colsums((abs(x - tm2)))), MARGIN = 1L)
    }
    
    # G. Grothendieck's solution
    f4 <- \(){
        apply(Rfast::dista(m1, m2, type = "manhattan"), 1, which.min)
    }
    
    # a variant to G. Grothendieck's solution, by using `dapply`
    f5 <- \(){
        collapse::dapply(X = Rfast::dista(m1, m2, type = "manhattan"), which.min, MARGIN = 1)
    }
    
    # Onyambu's solution
    Rcpp::cppFunction("IntegerVector closestRcpp(NumericMatrix A, NumericMatrix B) {
      int n = A.nrow();
      IntegerVector closest(n);
      for (int i = 0; i < n; ++i) {
        double prev_dist = 1e308, dist;
        for (int j = 0; j < B.nrow(); ++j){
          double dist = sum(abs(A(i, _) - B(j, _)));
          if (dist < prev_dist) {
            prev_dist = dist;
            closest[i] = j+1;
          }
        }
      }
      return closest;
    }")
    f6 <- \() {
        closestRcpp(m1, m2)
    }
    
    
    microbenchmark(
        f1(),
        f2(),
        f3(),
        f4(),
        f5(),
        f6(),
        unit = "relative",
        check = "equivalent"
    )
    

    mostra

    Unit: relative
     expr       min       lq     mean    median        uq       max neval
     f1() 28.222593 28.05963 7.522702 28.221577 29.144915 2.4924392   100
     f2() 18.704444 19.37280 5.715675 20.383970 21.840241 2.1410204   100
     f3() 11.630370 11.87556 4.233875 12.320916 12.728101 2.2702689   100
     f4() 12.555926 13.06498 3.480127 13.401387 14.256614 1.0021835   100
     f5()  9.074074  9.30748 2.714870  9.563296  9.612287 0.9920494   100
     f6()  1.000000  1.00000 1.000000  1.000000  1.000000 1.0000000   100
    
    • 4
  2. G. Grothendieck
    2024-07-26T22:45:45+08:002024-07-26T22:45:45+08:00

    Podemos usar distado Rfast

    library(Rfast)
    
    apply(dista(m1, m2, type = "manhattan"), 1, which.min)
    ## [1]  8  3  2  3  3  1  2  3  6 10
    
    • 4
  3. Best Answer
    Ronak Shah
    2024-07-26T21:14:23+08:002024-07-26T21:14:23+08:00

    Aqui está uma solução R básica usando apply:

    apply(m1, 1, \(x) which.min(sqrt(colSums(abs(x - t(m2)))))) 
    #[1]  8  3  2  3  3  1  2  3  6 10
    

    Comparando-o com sua solução atual, ele se sai bem:

    set.seed(123)
    m1 = matrix(runif(10 * 5), nrow = 10, ncol = 5)
    m2 = matrix(runif(10 * 5), nrow = 10, ncol = 5)
    
    baseR_sol <- function(m1, m2) {
      apply(m1, 1, \(x) which.min(sqrt(colSums(abs(x - t(m2))))))  
    }
    
    for_loop_sol <- function(m1, m2) {
      for(i in 1:nrow(m1)){
        dist = 9999
        index = -1
        for(j in 1:nrow(m2)){
          test = sqrt(sum(abs(m1[i,]-m2[j,])))
          
          if (test < dist) {
            dist = test
            index = j
          }
        }
        print(index)
      }
    }
    
    
    microbenchmark::microbenchmark(
      baseR_sol = baseR_sol(m1, m2), 
      for_loop_sol = for_loop_sol(m1, m2), times = 10L
    )
    
    #         expr   min    lq    mean median     uq    max neval
    #    baseR_sol 158.0 185.2  865.81 195.35  224.8 6902.8    10
    # for_loop_sol 764.6 830.2 1051.29 973.45 1312.0 1348.9    10
    
    • 3
  4. Onyambu
    2024-07-27T00:47:20+08:002024-07-27T00:47:20+08:00

    Considere usar Rcpp/C:

    Rcpp::cppFunction("IntegerVector closestRcpp(NumericMatrix A, NumericMatrix B) {
      int n = A.nrow();
      IntegerVector closest(n);
      for (int i = 0; i < n; ++i) {
        double prev_dist = 1e308, dist;
        for (int j = 0; j < B.nrow(); ++j){
          double dist = sum(abs(A(i, _) - B(j, _)));
          if (dist < prev_dist) {
            prev_dist = dist;
            closest[i] = j+1;
          }
        } 
      }
      return closest;
    }")
    
    closestRcpp(m1, m2)
    [1]  8  3  2  3  3  1  2  3  6 10
    
    • 2

relate perguntas

  • Adicionar número de série para atividade de cópia ao blob

  • A fonte dinâmica do empacotador duplica artefatos

  • Selecione linhas por grupo com 1s consecutivos

  • Lista de chamada de API de gráfico subscritoSkus estados Privilégios insuficientes enquanto os privilégios são concedidos

  • Função para criar DFs separados com base no valor da coluna

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    Vue 3: Erro na criação "Identificador esperado, mas encontrado 'import'" [duplicado]

    • 1 respostas
  • Marko Smith

    Por que esse código Java simples e pequeno roda 30x mais rápido em todas as JVMs Graal, mas não em nenhuma JVM Oracle?

    • 1 respostas
  • Marko Smith

    Qual é o propósito de `enum class` com um tipo subjacente especificado, mas sem enumeradores?

    • 1 respostas
  • Marko Smith

    Como faço para corrigir um erro MODULE_NOT_FOUND para um módulo que não importei manualmente?

    • 6 respostas
  • Marko Smith

    `(expression, lvalue) = rvalue` é uma atribuição válida em C ou C++? Por que alguns compiladores aceitam/rejeitam isso?

    • 3 respostas
  • Marko Smith

    Quando devo usar um std::inplace_vector em vez de um std::vector?

    • 3 respostas
  • Marko Smith

    Um programa vazio que não faz nada em C++ precisa de um heap de 204 KB, mas não em C

    • 1 respostas
  • Marko Smith

    PowerBI atualmente quebrado com BigQuery: problema de driver Simba com atualização do Windows

    • 2 respostas
  • Marko Smith

    AdMob: MobileAds.initialize() - "java.lang.Integer não pode ser convertido em java.lang.String" para alguns dispositivos

    • 1 respostas
  • Marko Smith

    Estou tentando fazer o jogo pacman usando apenas o módulo Turtle Random e Math

    • 1 respostas
  • Martin Hope
    Aleksandr Dubinsky Por que a correspondência de padrões com o switch no InetAddress falha com 'não cobre todos os valores de entrada possíveis'? 2024-12-23 06:56:21 +0800 CST
  • Martin Hope
    Phillip Borge Por que esse código Java simples e pequeno roda 30x mais rápido em todas as JVMs Graal, mas não em nenhuma JVM Oracle? 2024-12-12 20:46:46 +0800 CST
  • Martin Hope
    Oodini Qual é o propósito de `enum class` com um tipo subjacente especificado, mas sem enumeradores? 2024-12-12 06:27:11 +0800 CST
  • Martin Hope
    sleeptightAnsiC `(expression, lvalue) = rvalue` é uma atribuição válida em C ou C++? Por que alguns compiladores aceitam/rejeitam isso? 2024-11-09 07:18:53 +0800 CST
  • Martin Hope
    The Mad Gamer Quando devo usar um std::inplace_vector em vez de um std::vector? 2024-10-29 23:01:00 +0800 CST
  • Martin Hope
    Chad Feller O ponto e vírgula agora é opcional em condicionais bash com [[ .. ]] na versão 5.2? 2024-10-21 05:50:33 +0800 CST
  • Martin Hope
    Wrench Por que um traço duplo (--) faz com que esta cláusula MariaDB seja avaliada como verdadeira? 2024-05-05 13:37:20 +0800 CST
  • Martin Hope
    Waket Zheng Por que `dict(id=1, **{'id': 2})` às vezes gera `KeyError: 'id'` em vez de um TypeError? 2024-05-04 14:19:19 +0800 CST
  • Martin Hope
    user924 AdMob: MobileAds.initialize() - "java.lang.Integer não pode ser convertido em java.lang.String" para alguns dispositivos 2024-03-20 03:12:31 +0800 CST
  • Martin Hope
    MarkB Por que o GCC gera código que executa condicionalmente uma implementação SIMD? 2024-02-17 06:17:14 +0800 CST

Hot tag

python javascript c++ c# java typescript sql reactjs html

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve