Este cientista de dados quer criar um arquivo sobre a história da medição da Internet

• Jim Cowie, cofundador e Chief Data Scientist da DeepMacro, convida à criação de uma biblioteca online sobre a medição da Internet.
• Ele acredita que há três etapas para aperfeiçoar uma tarefa: salvar, contar e explorar.

Jim Cowie, cofundador e Chief Data Scientist da DeepMacro, publicou recentemente um artigo intituladoThinking about Internet historyno site da APNIC. Ele tem mais de 25 anos de experiência como contador de histórias de dados na área de medição da Internet e recentemente lançou a Internet History Initiative, com a ideia de construir uma biblioteca da Internet para futuros historiadores, reunindo a história registrada da Internet.

Leia também: O que é a APNIC? No coração da espinha dorsal da Internet na Ásia-Pacífico

Organizar a história para interpretá-la e torná-la acessível e significativa para os futuros pesquisadores.

Jim Cowie, cofundador e Chief Data Scientist da DeepMacro

Cowie argumenta que, se quisermos garantir que a história da Internet seja preservada de forma quantificável para as futuras gerações de pesquisadores, e que os dados sejam reunidos para protegê-los de danos irreversíveis, temos essencialmentetrês tarefas coletivasa cumprir antes que todos esqueçamos como isso funciona:

• Preservar a história coletando registros insubstituíveis da evolução da Internet.
• Compilar a história para explicá-la e torná-la acessível e significativa para futuros pesquisadores.
• Explorar a história e criar ferramentas e visualizações que todos possam apreciar e celebrar.

Etapa 1: Salvar

Então, o que devemos conservar?

Além das medições ativas, devemos manter um registro dos dados de registro – a quem esses recursos de rede foram atribuídos a cada dia da história, pela ARIN, RIPE NCC e APNIC – e qualquer informação que possamos encontrar sobre o nome DNS associado a cada endereço IP em um determinado dia. Essas são pistas coletivas sobre o que todos esses hosts da Internet estão fazendo, e também fornecem pistas sobre sua possível localização na Terra.

Refatorar a Internet em um banco de dados instantâneo

Finalmente, todos esses dados DNS e de registro são muito efêmeros, o que significa que podem mudar diariamente sem aviso. Se quisermos mais tarde construir indicadores críveis, como a densidade de hosts da Internet em uma determinada área, precisamos então rastrear o momento de cada breve observação.

Lembremos que, nos anos 2010, o esgotamento do pool IPv4 disponível desencadeou uma onda de vendas e realocações internacionais de blocos de endereços de rede, de modo que (por exemplo) um bloco de endereços de rede que antes hospedava clientes DSL na Romênia poderia desaparecer da Internet por um tempo, para depois reaparecer em um data center na Arábia Saudita para servir páginas da web. A geografia da Internet muda rapidamente, portanto precisamos não apenas de um mapa geográfico de todos os endereços IP e do propósito de cada endereço IP.

Precisamos também saber como esse mapa se parecia diariamente nas últimas décadas, à medida que os hosts e os recursos associados a cada endereço IP se moviam e mudavam de funcionalidade.

Finalmente, todos esses dados DNS e de registro são muito efêmeros, o que significa que podem mudar diariamente sem aviso. Se quisermos mais tarde construir indicadores críveis, como a densidade de hosts da Internet em uma determinada área, precisamos então rastrear o momento de cada breve observação.

Lembremos que, nos anos 2010, o esgotamento do pool IPv4 disponível desencadeou uma onda de vendas e realocações internacionais de blocos de endereços de rede, de modo que (por exemplo) um bloco de endereços de rede que antes hospedava clientes DSL na Romênia poderia desaparecer da Internet por um tempo, para depois reaparecer em um data center na Arábia Saudita para servir páginas da web. A geografia da Internet muda rapidamente, portanto precisamos não apenas de um mapa geográfico de todos os endereços IP e do propósito de cada endereço IP.

Precisamos também saber como esse mapa se parecia diariamente nas últimas décadas, à medida que os hosts e os recursos associados a cada endereço IP se moviam e mudavam de funcionalidade.

Etapa 2: Contar

Depois de preservarmos com sucesso todos os nossos conjuntos de dados digitais ameaçados, poderemos começar a gerenciá-los e falar sobre eles. A maior parte da pesquisa sobre medição da Internet tem se concentrado em problemas operacionais aqui e agora – monitorar lentidões e interrupções dentro e entre provedores, e entender como a Internet contorna o tráfego roteado corrompido. A questão da evolução histórica é muitas vezes secundária. Podemos encontrar novas maneiras de olhar para a Internet através do prisma da história para sair dessa "armadilha operacional".

Parte da razão pela qual fazemos isso é para incentivar as partes da Internet de crescimento mais lento e menos diversificadas a se desenvolverem mais rapidamente, e é verdade que o ambiente regulatório nacional (e o papel central dos provedores estatais em muitas economias) pode fazer com que algumas partes da Internet se comportem de maneira específica à economia.

Mas Jim Cowie espera que, para o bem dos futuros historiadores, possamos encontrar melhores maneiras de manter a intuição geográfica, em vez de cair em uma espécie de armadilha cognitiva que considera uma pegada nacional da Internet como uma mera fronteira soberana a ser defendida.

Alguns desses "fragmentos de carga de trabalho" são muito específicos no tempo e no espaço para aqueles que querem entender as conexões da Internet que são consistentes com eventos históricos. Por exemplo, como era para os usuários universitários na China usar a pesquisa do Google em 2009? Como era para um usuário móvel no Cairo querer acessar a Wikipedia em 2011? Como era o setor financeiro na América do Sul em conexão com a Bloomberg e a Reuters nos anos 2000? Qual será a diversidade do nó Ethereum em 2020 ou do servidor Mastodon em 2023 em termos de hospedagem em comparação com os consumidores da Internet em todo o mundo?

Algumas dessas partes são muito relevantes – podemos ser capazes de mapear as integrações dos hosts na Internet e visualizar as conexões entre os provedores que suportam uma determinada parte da carga de trabalho.

Etapa 3: Explorar

A razão pela qual nos esforçamos para preservar e organizar a história da Internet como um produto tecnológico é ajudar o público a entender como a Internet opera sua mágica. A Internet de hoje funciona incrivelmente bem, em grande parte graças às condições específicas em que se desenvolveu, sob uma governança multipartes, em vez de um sistema de tratado multilateral que muitas vezes valoriza a abertura descentralizada e a inovação, enquanto as autoridades centralizadas podem estar mais inclinadas a privilegiar a segurança, a previsibilidade e o controle.
Uma vez que tenhamos salvo a história da Internet e recrutado cientistas reflexivos que possam nos ajudar a quantificar alguns dos benefícios sociais (custos sociais líquidos) da Internet, precisaremos de ferramentas para ajudar a contar essas histórias. Principalmente visualizações, talvez visitas imersivas, e certamente o tipo de exposições interativas que os jornalistas de dados usam para informar e entreter. "Nosso investimento no fornecimento desses conjuntos de dados abrirá a porta para colaborações mais amplas com artistas, jornalistas e contadores de histórias visuais."

É isso que Jim Cowie quer lançar. Podemos prever com confiança que, assim como a Internet mudou a sociedade, a sociedade certamente continuará a mudar a Internet por uma combinação concorrente de regulamentação de cima para baixo com inovação de baixo para cima e demanda popular.

Para aqueles que se preocupam com o futuro da Internet, a corrida agora está lançada para nos tornarmos melhores bibliotecários da história da Internet, para que possamos preservar e contar as grandes coisas da Internet.