Search Results

Informe quantas vezes cada cenário será executado. Explique também, quando relevante: por que essa quantidade foi escolhida; se existe período de aquecimento; se existe intervalo entre execuções; como o ambiente será restaurado; se a ordem dos experimentos se...

Explique: quais ferramentas coletarão os dados; frequência de coleta; formato; onde serão armazenados; como serão identificados; como será preservada a relação entre execução e cenário. Mantenha separados: Dados brutos e Dados processados. Os dados brutos de...

Explique antes de apresentar os resultados como os dados serão tratados. Por exemplo: limpeza; agregação; cálculo de médias; medianas; desvios; intervalos de confiança; testes estatísticos; identificação de valores inválidos; geração de gráficos. A técnica u...

Verifique se existe relação entre: Objetivo Específico ↓ Questão Experimental ↓ Métrica ↓ Experimento ↓ Resultado esperado Exemplo: OE Questão Métrica Fator Evidência OE2 QE1 Tempo de resposta Réplicas Medições dos cenários C1–C4 OE3 QE2 CPU/Memória Car...

Antes de considerar o plano concluído: O objetivo da avaliação está definido. O objetivo está relacionado aos Objetivos Específicos. As questões experimentais estão definidas. Cada questão pode ser respondida por dados. O ambiente experimental está descrito. ...

Antes de iniciar a escrita deste capítulo, verifique se os experimentos previstos no Plano de Experimentação foram executados adequadamente. Confirme: cenários executados; fatores e níveis utilizados; número de repetições; métricas coletadas; integridade dos ...

Sempre que possível, organize os resultados utilizando as Questões Experimentais definidas no Capítulo 5B. Por exemplo, considere: QE1 — Como a quantidade de réplicas influencia o tempo de resposta do sistema? QE2 — Como o aumento da carga afeta a utilizaçã...

Para cada Questão Experimental, utilize a seguinte sequência: 1. Retome a questão Explique brevemente o que está sendo investigado. 2. Apresente os resultados Mostre os dados relevantes utilizando gráficos, tabelas ou outras representações apropriadas. 3. Desc...

Escolha a representação de acordo com aquilo que pretende comunicar. Utilize tabelas quando: valores exatos forem importantes; existirem poucos valores; o leitor precisar consultar números específicos; a comparação tabular for mais clara. Utilize gráficos qu...

Um erro comum é simplesmente transformar o gráfico em texto. Por exemplo: A Figura 10 apresenta o tempo de resposta. Com 100 usuários, o tempo foi de 50 ms. Com 500 usuários, foi de 90 ms. Com 1.000 usuários, foi de 180 ms. Esse texto descreve os valores, ma...

Quando houver múltiplos sistemas, configurações ou níveis, não analise cada um isoladamente. Compare-os. Por exemplo: O Sistema A apresentou menor tempo de resposta que o Sistema B nos níveis de 100 e 500 clientes. Entretanto, em 1.000 clientes, essa diferenç...

Não considere apenas valores médios quando a variabilidade dos dados for relevante. Duas configurações podem possuir médias semelhantes e comportamentos muito diferentes. Por exemplo: Sistema A Média: 100 ms Baixa variação entre as execuções. Sistema B Média: ...

Quando forem utilizados métodos estatísticos, explique: qual método foi utilizado; por que ele é adequado; quais hipóteses ou condições são necessárias; quais resultados foram obtidos; como esses resultados devem ser interpretados. Evite simplesmente informa...

Os resultados não precisam confirmar aquilo que o aluno esperava. Por exemplo, você pode esperar: Mais réplicas produzirão menor tempo de resposta. Mas os experimentos podem mostrar: A partir de determinado número de réplicas, o desempenho não melhora. Iss...

Uma métrica pode ajudar a explicar outra. Por exemplo: Carga aumenta ↓ CPU aumenta ↓ CPU aproxima-se da saturação ↓ Tempo de resposta cresce ↓ Vazão deixa de aumentar Nesse caso, analisar CPU, tempo de resposta e vazão conjuntamente pode fornecer uma explicaçã...

Cada seção correspondente a uma Questão Experimental deve terminar com uma resposta. Por exemplo: QE1 — Como a quantidade de réplicas influencia o tempo de resposta? Depois da apresentação e análise dos resultados: Os resultados indicam que o aumento de uma...

Responder às Questões Experimentais não é o objetivo final. As questões existem para ajudar a alcançar os Objetivos Específicos. Verifique a rastreabilidade: Objetivo Específico Questão Experimental Evidência Situação OE1 QE1 Experimentos E1–E4 Alcançado ...