Resenha: Performance Measurements and Analysis of Network I/O Applications in Virtualized Cloud

Referência: Yiduo Mei; Ling Liu; Xing Pu; Sivathanu, S.; "Performance Measurements and Analysis of Network I/O Applications in Virtualized Cloud," Cloud Computing (CLOUD), 2010 IEEE 3rd International Conference on , vol., no., pp.59-66, 5-10 July 2010

1 - Legibilidade, organização e apresentação: este artigo é fácil de entender? É organizado? A apresentação é adequada? 1: Pobre - 2: Fraco - 3: Médio - 4: Bom - 5: Muito bom

O artigo possui 16 páginas, 17 figuras e 1 tabela. Suas seções foram bem divididas, porém a quantidade de figuras prejudicou a organização do texto, assim como a visualização delas e a respectiva localização no texto de sua referência. Ao se ler a introdução, identifica-se claramente que o foco do artigo é a medida e análise de desempenho em operações de I/O. A apresentação das coletas em vários tipos de gráficos permite uma análise profunda e detalhada dos experimentos. A forma como as análises foram conduzidas deixam o leitor confuso. Talvez fosse melhor reduzir a quantidade de figuras para que a organização e visualização delas ficasse melhor.

2 – Referência a trabalhos relacionados: Considerando a literatura geral sobre o tema deste trabalho, como você avalia a qualidade das referências deste artigo? (1: Pobre - 2: Fraco - 3: Médio - 4: Bom - 5: Muito bom)

Os trabalhos relacionados foram poucos, e somente no nível de citação. Os trabalhos focaram em virtualização, configurações de algoritmos de escalonamento e pouco em I/O, que deveria ser o foco principal. Além disso, o artigo foi realizado utilizando o Xen, e dá a entender que também foi utilizado o Xen nos trabalhos relacionados, não relacionando nem citando trabalhos com outros hypervisors.

3 – Conteúdo técnico. (1: Pobre - 2: Fraco - 3: Médio - 4: Bom - 5: Muito bom)

O conteúdo do artigo é bastante técnico. Possui muitos detalhes do ambiente, das medições e análises, todas explicadas com gráficos. Os autores possuem conhecimento no assunto, demonstrado pelos experimentos variados e comparação de resultados.

4 – Originalidade e contribuição: Julgue este artigo em termos de quanto ele é original em relação ao estado da arte assim como sua contribuição para a pesquisa científica. (1: Pobre - 2: Fraco - 3: Médio - 4: Bom - 5: Muito bom)

Já existe uma quantidade razoável de trabalhos que medem desempenho em ambientes de computação em nuvem, não havendo originalidade neste aspecto. O artigo focou em operações de I/O, o que é o diferencial dele, pois a maioria dos artigos foca em CPU e memória.

5 – Recomendação geral do artigo. (1: Forte rejeição - 2: Fraca rejeição - 3: Artigo intermediário - 4: Fraca aceitação - 5: Forte aceitação)

Pontuaria este artigo como “4”. A justificativa seria devido ao alto nível das análises, com foco em operações de I/O, precisando apenas organizar melhor as ideias e a apresentação das análises.

6 – Quais são os principais pontos fortes deste artigo?

Ao se ler a introdução, identifica-se claramente que o foco é a medida e análise de desempenho em operações de I/O. O ambiente experimental disponibilizou detalhes das configurações das máquinas virtuais, o que não é comum. Houve uma boa descrição das métricas e ferramentas utilizadas para coleta: o Xenmon e o Xentop. A análise profunda e detalhada dos dois experimentos, com muitos detalhes técnicos, permite uma reprodução e comparação de resultados.

7 – Quais são as grandes deficiências deste artigo?

Os trabalhos relacionados foram apenas citados, e não foram comparados. As análises ficaram muito longas e detalhadas, e consequentemente confusas. Os gráficos não são fáceis de se interpretar, nem tão visíveis. A grande quantidade de figuras (17) prejudicou a organização do texto. Algumas figuras tiveram claramente o objetivo descrito da sua realização no texto, porém a maioria não. Alguns valores, como throughput, utilização da CPU e I/O aparecem normalizados, mas não foi descrito como. A forma como o algoritmo de escalonamento foi tratada não clara o suficiente.

8 – Comentários aos autores que justifiquem sua pontuação e recomendação geral:

O artigo requer um conhecimento técnico do hypervisor Xen, o que dificulta o entendimento. Seria interessante que os trabalhos relacionados a I/O fossem comentados e comparados. A forma como o algoritmo de escalonamento foi trabalhada no artigo poderia ser melhor explicada, deixando mais clara a sua utilização. Quanto ao formato, talvez fosse melhor reduzir a quantidade de figuras para que a organização e visualização delas ficasse melhor. Os objetivos de cada figura poderiam ter sido escritos de maneira mais clara. Seria interessante descrever pontos os fortes e fracos do artigo, já que não foram comentados.