Vc pode tentar o Acid3, ele mostra o Google Chrome como o único com 100 pontos, enquanto IE 8 e 9 e Firefox andam rodando com menos que isso. Para acessar, apenas digite ACID3 e estou com sorte, o sistema identifica qual navegador está sendo utilizado no instante e faz os cálculos.
A velocidade de um navegador depende de uma série de fatores, entre os quais a capacidade de ler uma página e seus elementos ( códigos HTML, Flash, JavaScript, CSS, como identifica e lê imagens, vídeos, etc. ). Como nem todo site/página é escrito no mesmo código e nem contém sempre os mesmos elementos, dai a variação na velocidade, pois diferentes navegadores são elaborados a partir de diferentes linguagens e cada um se torna eficaz na leitura otimizada de ou outro elemento, por isso as diferentes velocidades entre navegadores.
Teste os 3 navegadores mais famosos, o Internet Explorer ( o 9 é bem mais rápido que o 8 ), o Firefox e o Chrome. Um navegador pode até ser mais rápido para certas páginas, mas talvez seja mais lento, podendo até travar, em outras. No geral os testes que pretendem mostrar qual a melhor velocidade de um ou outro navegador, na verdade trabalham apenas com médias de velocidade.