[FUG-BR] Benchmark Performance -- PostgreSQL -- FreeBSD x Linux

Paulo Henrique paulo.phenrbr em gmail.com
Sábado Abril 5 18:02:05 BRT 2008


Modelo de benchmark válido.
Após ler essa thread estive pensando em como coloca benchmarks válidos sem
argumentos de contradição.

A primeira nota seria sobre Hardware:

Todos os hardware deveria ser de igual configuração sendo eles em lote de
fabricação iguais.
E que permitiria ao sistema utilizar seus recursos de performace sem
interferência.
Ou todos os teste executado sobre o mesmo hardware, o que daria ainda um
argumento para questionamento do hardware; desgate sofrido pelos teste já
executados em outros sistemas.
e atravez de teste como o calculo do pi não ouver nenhuma diferença no
resultado.

Segunda nota Systema.

Ultima versão do sistema da data do benchmark.

Terceira nota, Implementador do sistema.

Atravez de testes em cada sistema por tres implementadores especialista no
sistema no qual irá ser testado. diferentes sobre as mesmas condições do
benchmark final, o que possuir melhores resultados ser o implementará o
sistema final para comparação com os demais sistemas.

Quarta nota, Aplicações.


A aplicação incluira todo o suporte tanto sobre velocidade como em
estabilidade em sua compilação e instalação assim como configuração e
baseado em ambiente real de produção. Contento considerações de segurança.

Quinta e ultima nota ao meu intendimento não inerente ao benchmark.
Cada pessoa tem que respeitar os resultados, e admitir a real situação do
sistema atravez dos resultados obtidos.
E executar o benchmark sobre o mesmo hardware em no minimo duração de uma
semana e o pior resultado será o valido no final do benchmark.

Esse seria os criterio creio eu para um benchmark entre sistemas.
Não tenho a menor intenção de criar flames e adoraria ter novas
considerações dos colegas para uma fidelidade corrente do benchmark.

Obrigado a todos e me desculpe caso tenha dado algum criterio errôneo.

-- 
Atenciosamente Paulo Henrique. To Powered By  BSD Unix.


Mais detalhes sobre a lista de discussão freebsd