Início / computer / Perguntas / 1435436
Accepted
Jimmy Hawkins
Asked: 2019-05-11 12:04:12 +0800 CST

obtendo leituras ao gravar no dispositivo bruto

  • 772

Preciso mover um grande bloco de dados para um volume lógico sem nenhum sistema de arquivos. Ao fazer isso, notei que em cada gravação há uma leitura. Isso é algo que não vejo para gravações em arquivos regulares. Eu reduzi para as seguintes etapas:

### Creat logical volume
lvremove -f /dev/VolGroup1/data_test
lvcreate -L 100G -n data_test VolGroup1

### Start dumping data
nohup dd if=/dev/zero of=/dev/VolGroup1/data_test bs=1k count=100M &

### Check IO
iostat -h -d -k -N -y  -j PATH -p /dev/VolGroup1/data_test 10 1

Observe muitas leituras nesse novo volume por dd

Device:            tps    kB_read/s    kB_wrtn/s    kB_read    kB_wrtn
dm-9
              56900.60    110719.28    116882.72    1108300    1169996

Alguém tem ideia de por que isso está acontecendo? Os sistemas subjacentes são raid10 de SSDs.

linux dd

1 respostas

  1. Best Answer

    Parece que o LVM expõe um tamanho mínimo de E/S. Se você tentar gravar em menos que (um múltiplo) desse tamanho de E/S, o sistema primeiro lerá o delta para preencher o último bloco, atualizará seu conteúdo e finalmente o reescreverá.

    Embora eu não tenha conseguido identificar a documentação exata sobre isso, encontrei uma referência no Redhat :

    O LVM também detectará as "dicas de E/S" para um dispositivo. O início da área de dados de um dispositivo será um múltiplo de 'minimum_io_size' ou 'optimal_io_size' exposto em sysfs. 'minimum_io_size' é usado se 'optimal_io_size' for indefinido (0). O LVM determinará automaticamente essas "dicas de E/S" por padrão, mas isso pode ser desabilitado através do 'data_alignment_detection' do lvm.conf. Desativar isso não é recomendado.

    Algumas pesquisas levam a (aqui usando dm-1):

    $ grep ^ /sys/class/block/dm-1/queue/*_io_size
/sys/class/block/dm-1/queue/minimum_io_size:4096
/sys/class/block/dm-1/queue/optimal_io_size:0

    Então se pra você, substituindo por dm-9dá por exemplo também 4096 e 0, use um tamanho de 4k. Ou então, se houver 4096 e um valor maior, use esse valor maior para desempenho ideal.

    Portanto, se você aumentar de acordo com esses valores, o bs=parâmetro deverá ser zero lido e a velocidade de gravação melhorará.

    • 2

relate perguntas