Ping não tem a ver apenas com a velocidade da sua conexão, mas com a rota que o seu computador faz através da internet para chegar até o servidor do jogo. Para efeito de comparação, veja sua internet de 30mbps como uma ferrari e a do seu amigo de 5mbps como um fusca. Ambos têm que chegar até a localização X onde está o servidor porém pode ser que o caminho do seu amigo seja menor, com menos curvas, uma estrada mais bem feita, enquanto o seu é uma estrada cheia de curvas e não asfaltada, em região montanhosa e mais distante.

Alguns provedores de internet ainda fazem parcerias com desenvolvedoras de jogos online para melhorar a rota do cliente para o servidor, por isso que muitas vezes uma internet menor de um provedor mais conhecido é melhor que uma maior de um provedor local.

Isso mesmo o Ping tem relação com o caminho que o pacote segue na internet, as grandes operadoras tem acesso direto ao Backbone da internet, reduzindo o caminho, já as pequenas operadoras contratam um intermediário como a Embratel e o pacote vai passar primeiro lá.

O tipo de conexão também influência, se a fibra ótica entrar na sua casa, o pacote vai direto para o Backbone sem passar por repetidores!
Eu tenho a NET/Virtua com ping de 9ms, a Net usa cabos coaxiais para entrar na residencia, então a fibra ótica pode estar próxima, mas o sinal terá que passar por um conversor.
Meu primo tem um modem de fibra ótica com ping de 3ms, a VIVO distribuía este modem para os primeiros clientes de plano de fibra ótica no Leblon-RJ.

Ideal de ping é entre 7 e 9

Li alguns comentário e acho que esse ping alto, é uma forma que as operadoras arrumaram para atrasar a sua internet. Um ping muito alto pode ser programado através de um servidor Linux ou roteador. É uma forma que as operadoras arrumaram de atrapalhar a internet de quem usa gato de TV pela internet. Estou falando dos pings altos entre alguns pings normais, não dos pings altos repetidadas vezes. Esses pings altos acarretam paradas na TV como aqueles que acontecem nos jogos. Um meio fácil de você perceber isso é através do teste de internet "Monitor Banda Larga" da Fiesp e Simet. Ao fim do teste, ele te mostra se a internet foi aprovada ou reprovada para determinadas conexões, como: jogos, streaming, Ligação com Voz, e Video Conferência. Você deve fazer a reclamação na sua operadora.