Desde que o termo Internet of Things (IoT) foi cunhado por Kevin Ashton em 1999, várias plataformas de middleware foram desenvolvidas para lidar com desafios importantes para a integração de diferentes tecnologias. Nesse contexto, alguns estudos foram feitos com a intenção de avaliar aspectos de qualidade delas. No entanto, muitos deles falham em abordar de maneira holística outros aspectos cruciais que precisam ser avaliados para aplicativos de IoT. Este trabalho propõe uma abordagem metodológica para avaliar plataformas de middleware de IoT, com o objetivo de ajudar a comunidade científica, fornecendo a eles uma ferramenta teórica para todo o processo de avaliação. A metodologia baseia-se no conjunto de normas ISO / IEC 25000 SQuaRE e no processo de Raj Jain para avaliação de desempenho. Também desenvolve-se um estudo de caso para ilustrar a proposta com diferentes soluções de middleware, 12 brokers MQTT open source, validando assim a viabilidade de nossa metodologia.