Hospedagem e servidores dedicados: responda a perguntas. Parte 2. Por que uma Internet tão cara no data center?

Nesta série de artigos, queremos considerar os problemas que as pessoas têm ao trabalhar com provedores de hospedagem e servidores dedicados em particular. Realizamos a maior parte das discussões em fóruns em inglês, tentando ajudar os usuários principalmente com conselhos, em vez de autopromoção, dando a resposta mais detalhada e imparcial, porque nossa experiência no campo tem mais de 14 anos, centenas de soluções bem-sucedidas e milhares de clientes satisfeitos. Não obstante, nossas respostas não devem ser entendidas como as únicas respostas corretas da primeira instância; elas podem conter imprecisões e até erros; ninguém é perfeito. Ficaremos gratos se você os adicionar ou corrigir nos comentários.

Hospedagem e servidores dedicados: responda a perguntas. Parte 1

Olá hosters. Peço desculpas se a pergunta é estúpida. Mas por que a Internet na CD é mais cara que o provedor da cidade? Em casa, 1 GB custa 500-600r. Hosters têm mais de 20k. Por que é que?

- Publicado em 01/06/2020 às 17:21 - Embora provavelmente o preço seja formado pela demanda, há muitos clientes domésticos e o preço provavelmente é mais baixo.

De fato, a questão é muito complexa e extensa, e nem um pouco boba. E isso nos faz pensar um pouco sobre o que é a Internet em princípio. Ou seja, trata-se de uma infinidade de dispositivos separados, geralmente combinados em redes maiores, que por sua vez são combinadas em uma rede mundial, graças ao protocolo TCP / IP e às linhas de comunicação com ou sem fio que pertencem a diferentes participantes da rede. Esses dispositivos e redes se comunicam de acordo com as regras de BGP estabelecidas por esses participantes da rede, e são eles que têm a capacidade de determinar quais rotas e a que velocidade o acesso é possível entre dois segmentos separados.

Portanto, "1 gigabit" é um valor muito condicional. 1 gigabit onde? Você pode, usando a Internet doméstica, transferir dados com tanta velocidade para alguém no Alasca? Ou talvez este 1 gigabit só seja possível dentro da sua cidade? Onde esse gigabit é fornecido e o tempo todo? Ou o prefixo mágico “do” é indicado na descrição da tarifa? E naqueles momentos em que não é fornecido, é possível obter uma velocidade muito menor? Ou você está longe de usar constantemente seu canal, e não 100% o tempo todo, e, por causa disso, o mesmo canal físico ou virtual pode ser usado por centenas de outros assinantes e, ao mesmo tempo, não interferir entre si, pois todos baixam e transferem dados em momentos diferentes e com intensidades diferentes?

Basta pensar que, se você baixar o canal de 1 Gbit / s constantemente, em um mês poderá baixar até 324.000 GB de dados. Qual é o tamanho do disco rígido ou SSD do seu computador? Quanto você baixa por mês? 300, 500, 1000 GB? E o mais importante, como, quando e onde?

Vamos lidar com esse problema com mais detalhes. No início da evolução da Internet, as pessoas, tanto na Ucrânia quanto na Federação Russa, trocavam dados principalmente entre si em pequenos territórios. Como o acesso a redes estrangeiras era bastante caro.

No início, cada um dos provedores menores se conectava ao mesmo provedor maior, e foi ele quem determinou quem e como, dos provedores menores - seus clientes, em quais condições e em que velocidade seriam comunicadas usando as linhas de comunicação fornecidas a ele. Por esse motivo, assinantes de diferentes regiões de um acordo podem transferir dados entre si e se comunicar de forma relativamente barata, uma vez que as informações passam por linhas de comunicação exclusivamente dentro desse acordo. Ao se comunicar com assinantes de uma cidade vizinha, não era incomum que o tráfego passasse por outro país ou mesmo por vários países devido à falta de uma linha de comunicação direta de alta velocidade entre fornecedores regionais, devido à distância e ao alto custo de construção dessa conexão.Mas cada um deles estava conectado a um participante maior da Internet, o provedor de transporte público de primeiro nível, Nível I, possuindo linhas físicas de comunicação que passavam por vários países e conectando grandes provedores de regiões individuais. A Internet estava bastante fragmentada.

O que é a Internet nos anos 2000? São muitas redes locais em cidades e regiões individuais, constituídas por usuários individuais que procuraram se conectar à mesma rede com o objetivo de trocar arquivos (vídeos, jogos e outras informações) quase de graça, a uma velocidade significativamente maior que a do modem, enquanto o acesso fora dessas redes ao que é chamado de World Wide Web era extremamente caro e lento.

De fato, foi então que emergiu uma hierarquia de provedores que garantiram a conectividade de rede - Nível I, Nível II e Nível III.

A camada III é um provedor de terceiro nível que fornece acesso à rede da Internet de clientes individuais - você e eu, usuários domésticos da Internet e entidades legais. Ele sempre compra canais de provedores maiores, níveis Nível II e Nível I. Ou seja, paga tráfego para todos, bem, para quase todos :) O

Nível II é um provedor regional que possui estradas que cobrem uma determinada região (cidade, país ou até vários países). ), ao qual vários provedores de nível III estão conectados, o que exige acesso à rede global e interconexão. Ele recebe uma taxa pelo tráfego que passa por suas redes para os provedores de Nível III (lucrando com o tráfego local em suas redes), enquanto paga pelo tráfego da rede global, que ele compra dos provedores de transporte de Nível I.

Nível I - não paga a ninguém pelo tráfego; os provedores de Nível III e II podem se conectar a ele.



Para deixar mais claro, vamos dar um exemplo. Por exemplo, existem a Cogent e a Telia, esses são grandes provedores de backbone de nível I que têm pontos de presença em muitas cidades e países e suas próprias linhas de comunicação entre eles. Os fornecedores menores dessas regiões desejam conectar-se a eles, a fim de trocar com mais eficiência o tráfego entre si e ter uma conexão com a "rede global", pois cada operador de Nível II está necessariamente conectado a pelo menos um operador de Nível I e, em seguida, de fato, dois (para garantir a tolerância a falhas) e não são desperdiçados em linhas de troncos caras, se não houver muito tráfego em uma determinada direção. Afinal, por que puxar um canal direto de Kiev para Moscou, se você é um pequeno provedor, e seus assinantes usam apenas 1 Gbit / s nessa direção, naquele momento,como canal de tronco, ele pode ter capacidade para dezenas ou mesmo centenas de milhares de gigabits, e colocar sua própria fibra é bastante caro.



Ao mesmo tempo, existem provedores de nível I com uma rede relativamente pequena. Por exemplo, se um provedor fornece fibra de Londres a Nova York, também pode ser um provedor de primeira camada, se for alugado a ele ou parte dos provedores de nível II e III de capacidade (canal virtual) localizados nos EUA e / ou na Europa como para aumentar a largura de banda da rede em uma determinada direção e aumentar a tolerância a falhas devido a uma rota alternativa.

No entanto, como a implantação de rodovias submarinas é muito cara, os provedores de backbone de Nível I geralmente têm dezenas de milhares de quilômetros de rede, uma vez que poucas pessoas têm apenas um tronco pequeno e não querem comprar acesso a outras redes.

Artigo do tópico:Mensagens em profundidade: a incrível história da Internet subaquática

Para fornecer acesso global a todas as redes, as operadoras de primeiro nível celebram acordos para a troca de tráfego e usam pontos de troca para isso, pois não pagam a ninguém, mas recebem dinheiro de todos. Às vezes, para expandir a esfera de influência e obter o máximo de tráfego possível, as guerras ponto a ponto são organizadas entre grandes players, quando os assinantes de redes que usam o Nível I de um fornecedor perdem a conexão com os assinantes das redes do Nível I de outro fornecedor. Como resultado, a rede da Internet está fragmentada. Mas não ficaremos muito distraídos com o tópico, pois a questão das guerras entre pares, talvez, deva ser discutida separadamente.

Acima de tudo nesta história, o Nível III é "azarado" para os provedores, pois eles pagam a todos pelo tráfego. Como resultado, na década de 2000, os provedores começaram a estabelecer redes entre si para economizar tráfego e trocar tráfego entre si gratuitamente ou por uma pequena taxa. Como regra geral, quem deposita a fibra e a usa de graça, o outro lado é obrigado a pagar “aluguel”, pois o primeiro lado investiu recursos e pagou pela manutenção da rede de fibra ótica.

Por exemplo, o provedor A consome muito tráfego de assinantes do provedor B. No provedor A, trata-se de tráfego de entrada, enquanto para o provedor B esse tráfego é de saída. O que você acha, qual dos provedores é mais benéfico?

Ao considerar esta pergunta, você precisa se lembrar de onde estão os sites? Nos servidores. E os servidores? Nos data centers. Os datacenters geram uma quantidade enorme de tráfego, pois baixam informações de servidores ... Eles têm o principal tráfego - de saída. Ao mesmo tempo que os provedores que fornecem acesso à Internet para nós, pelo contrário, são recebidos. O resultado é que a capacidade de 1 Gbit / s é vendida imediatamente para dois tipos diferentes de assinantes, a fim de usá-la de maneira eficaz: data centers e provedores de acesso à Internet. É isso que os operadores de nível I fazem. Ganhe em tudo.

Frequentemente, o emparelhamento (comunicação direta entre redes, ignorando outras redes) será benéfico principalmente para a parte cujos assinantes geram muito tráfego em uma determinada direção. E é esse lado que procura uma solução para construí-lo, economizando dinheiro e vendendo um canal gratuito para o data center ou outro provedor que fornece acesso à Internet (dependendo de quem você é, do data center ou ISP).

Quanto mais tráfego você gerar, maior o número de diferentes outros provedores que você deseja incomodar. As condições de emparelhamento podem ser diferentes - por exemplo, você pode alocar uma porta no seu roteador gratuitamente se o provedor construir a fibra para você às suas próprias custas, ou pode ser 50/50 ou outra proporção, ou você pode cobrar uma taxa de porta do provedor, se esse peering não for muito lucrativo para você e você poderá, com prazer, distribuir tráfego para o provedor de Nível I, fornecendo a ele um volume maior e um desconto.

Porém, muitas vezes, para simplificar o esquema e compartilhar as despesas de maneira mais justa, são criados os chamados pontos de troca de tráfego. Quando todos pagam sua contribuição ao ponto de troca por participação (na verdade, o ponto de troca é um provedor de Nível I) ou existe alguma regra que você deve gerar tanto tráfego, caso contrário será cobrada uma taxa. Ao mesmo tempo, cada um dos participantes se conecta ao ponto às suas próprias custas, constrói sua própria estrada ou aluga fibra ao ponto.

Por exemplo, em 2004, o custo da participação no ponto de troca de tráfego UA-IX (ponto de troca de tráfego ucraniano localizado em Kiev) foi de US $ 2530 por 1 Gbit / s no primeiro mês e US $ 330 no mês seguinte. Podemos ver essas condições graças ao arquivo da Internet. Ao mesmo tempo, cada um dos fornecedores forneceu a fibra de si mesma até o ponto de forma independente ou a alugou. E ainda era muito mais lucrativo do que pagar pelo mesmo tráfego para o mesmo Ukrtelecom (provedor de backbone de segundo nível), que vendia gigabit na Internet por US $ 20.000 / mês por 8 Mbps sem levar em conta o tráfego e fornecia serviços de transporte IP bastante caros entre regiões do país.

Informações mais completas podem ser encontradas no artigo: 20 anos da evolução da Internet na Ucrânia e como você se lembra da rede há 20 ou 10 anos?

Ao mesmo tempo, as redes domésticas venderam o acesso ao segmento ucraniano da Internet a usuários privados por apenas US $ 20 por mês, sem restrições à velocidade de 100 Mbit / s, quando eles próprios pagaram pelo menos US $ 33 + em manutenção de fibra ou alugam no ponto de troca. Infelizmente, não posso prever o coeficiente de sobrevenda - mas são dezenas de assinantes, com certeza, se não centenas. É interessante que hoje 100 gigabits no UA-IX possam ser comprados por menos de US $ 400 por mês e você não precise mais obter permissão de outros participantes do ponto de troca de tráfego, como era antes. Obviamente, essa é apenas a porta do roteador; você ainda precisa encaminhar suas fibras para o ponto de troca.

Passamos ao tópico de vender em excesso com mais força. Quantos assinantes posso vender um canal de 1 Gbit / s para que todos tenham alta velocidade? Não acredite, mas no início de 2009, um dos provedores de rede doméstica conseguiu vender acesso à Internet de alta velocidade a velocidades de até 100 Mbit / s (no segmento externo a velocidade era mais baixa, mas também bastante decente) à taxa de 15.000 clientes por 1 Tráfego estrangeiro de Gbps. Para minha pergunta razoável, como isso é possível - a resposta foi dada: a maioria deles está nas redes sociais (na época o vídeo não era tão popular) e, em geral, tudo é colocado, já que o tráfego é pequeno + são usados ​​servidores de cache que ajudam a não baixar um duas vezes o mesmo conteúdo de redes externas. Além disso, o fato de os inscritos não serem severamente limitados pelo canal,permite que você reduza o tempo do consumo de tráfego e libere o canal para solicitações de outros assinantes. É importante apenas manter o equilíbrio.

O total de 1 Gbit / s oferecido ao TS provavelmente é compartilhado entre várias centenas de clientes, se não mil. Como mesmo supondo que todo mundo bombeie uma média de 150 a 300 GB por mês, a largura de banda provavelmente será suficiente, mesmo levando em consideração o fato de o canal estar menos ocupado à noite do que durante o dia. Além disso, não é fato que o tráfego não seja local. Afinal, se você baixar o mesmo torrent e for assinante de um grande provedor, é altamente provável que baixe de um assinante da sua própria rede ou região, cujo tráfego não é tão caro. O YouTube e outros geradores de tráfego populares, a fim de reduzir custos e estar mais perto de seu público, estão construindo data centers e colocando servidores o mais próximo possível, como resultado do qual o custo do tráfego também é muito baixo.

Além disso, existem canais de qualidade diferente. É possível que você receba gigabit na Federação Russa, mas, no exterior, é improvável que essa velocidade seja fornecida para um fluxo. Além disso, não devemos esquecer que a largura de banda depende não apenas do canal da sua parte, mas também do recurso do qual você faz o download.

Então, por que o tráfego, quando colocado em data centers, é mais caro? O fato é que os servidores estatisticamente fornecem muito mais tráfego do que os usuários domésticos da Internet consomem tráfego de entrada, uma vez que um único servidor pode atender a centenas de milhares de solicitações e até milhões. Entre outras coisas, os datacenters reservam canais em uma extensão muito maior que os provedores de acesso à Internet para usuários domésticos, já que o Sevrer deve estar online 24 horas por dia, 7 dias por semana. E isso também afeta o preço. Por exemplo, em um novo site em Amsterdã, onde atualmente colocamos assinantes, usamos linhas de tronco de Nível I de três fornecedores de backbone de "nível superior" de uma só vez - Nível 3, GTT, NTT.

O custo da conectividade pode ser de 3.000 euros por cada 10 Gb / se muito mais. Além disso, se você usar apenas 2 operadores de tronco e precisar fornecer redundância 2N para o servidor, acontece que metade da conectividade não pode ser usada. Acontece que para cada 10 Gbit / s, você precisa comprar 20, gastando 6.000 euros, e manter metade da capacidade em caso de inadmissibilidade dos 10 primeiros, o que aumenta o custo em 2 vezes. No entanto, se houver três operadores de tronco, é suficiente reservar apenas um terço da banda. Como você pode perder simultaneamente um máximo de um terço.

Como regra, os canais que são tão caros fornecem uma velocidade incrivelmente alta por fluxo, e esses provedores têm uma rede bastante difundida em todo o mundo, o que permite fornecer o número mínimo possível de saltos entre você e o público e, portanto, o ping mínimo. No entanto, os datacenters sempre têm a oportunidade de economizar dinheiro criando conexões ponto a ponto com as redes e pontos de troca necessários. Isso nem sempre afeta positivamente a conectividade e, portanto, a qualidade do tráfego pode ser muito diferente.

Portanto, a Cogent é considerada um dos fornecedores de backbone mais baratos. Nós vendemos um canal de 10 gigabits para clientes individuais de 1N a preços incrivelmente baixos, mais baratos do que comprá-los, já que nem todo mundo usa a largura de banda completamente. Além disso, não se fala em 1 ou 10 gigabits por stream (um canal ponto a ponto de 1 ou 10 gigabits com QoS garantido pode custar dinheiro incrível), entende-se que o cliente pode gerar 10 gigabits para um total de 1000 ou 2000 assinantes, quando a velocidade por stream não é excederá 10 Mbit / s, mas isso é suficiente para assistir confortavelmente ao streaming de vídeo em qualidade HD da maioria das regiões da Federação Russa e da Ucrânia a partir de servidores localizados na Holanda. Aqueles que precisam de uma grande vazão garantida e QoS precisam comprar canais ainda mais caros.

O mesmo se aplica a servidores com um limite de tráfego de 100 TB e um canal de 1 Gbit / s (este é essencialmente um terço ou até meio gigabit). Damos esse tráfego não por 20k, mas por 500-600 rublos. Tendo encontrado a oportunidade de fornecer um preço mínimo, já que nem todo mundo usa seu limite. Você sabe quantas estatísticas mostram que 50 servidores com um canal de 1 Gbps e um limite de 100 TB geram tráfego? 2-3 Gbit / s. É por isso que temos a oportunidade de vender o canal aos assinantes por menos do que nos custa. Mas é claro que não em uma proporção tão boa quanto para os usuários de redes domésticas, já que centenas, milhares e até milhares de pessoas usam servidores simultaneamente.

Entre outras coisas, nós, como provedor de hospedagem, temos custos adicionais para rotear esse tráfego, pois um nível mais alto de consumo (total) nos obriga a ter equipamentos mais caros e, como resultado, uma rede mais cara. Apenas pense nisso! Em 2014, geramos mais tráfego do que toda a Bielorrússia:

“ua-hosting.company” ou como nos tornar um provedor de hospedagem do zero e gerar mais tráfego do que toda a Bielorrússia

imagem

Um pouco de publicidade :)


Obrigado por ficar com a gente. Você gosta dos nossos artigos? Deseja ver materiais mais interessantes? Ajude-nos fazendo um pedido ou recomendando aos seus amigos o VPS na nuvem para desenvolvedores a partir de US $ 4,99 , um analógico exclusivo de servidores de nível básico que foi inventado por nós para você: Toda a verdade sobre o VPS (KVM) E5-2697 v3 (6 núcleos) 10 GB DDR4 480 GB SSD 1 Gbps de US $ 19 ou como dividir o servidor? (as opções estão disponíveis com RAID1 e RAID10, até 24 núcleos e até 40GB DDR4).

Dell R730xd 2 vezes mais barato no data center Equinix Tier IV em Amsterdã? Somente nós temos 2 TVs Intel TetraDeca-Core Xeon 2x E5-2697v3 2.6GHz 14C 64GB DDR4 4x960GB SSD 1Gbps 100 TV a partir de US $ 199 na Holanda!Dell R420 - 2x E5-2430 2.2Ghz 6C 128GB DDR3 2x960GB SSD 1Gbps 100TB - a partir de US $ 99! Leia sobre Como criar um prédio de infraestrutura. classe c usando servidores Dell R730xd E5-2650 v4 que custam 9.000 euros por um centavo?

All Articles