Lar
Descobrindo nossas 'visitas ocultas' com dados de telefone celular e aprendizado de máquina
Se você já se perguntou como os pesquisadores rastreiam nossos movimentos por um país sem depender apenas de chamadas telefônicas, um estudo fascinante realizado por pesquisadores da China e dos Estados Unidos oferece algumas respostas. O trabalho colaborativo deles explora o uso de aprendizado de máquina para descobrir as "visitas ocultas" que fazemos — aquelas viagens que não aparecem nos dados de telecomunicações padrão porque não estamos usando nossos telefones o suficiente.
O estudo, intitulado **Identificando Visitas Ocultas a Partir de Dados Esparsos de Registro de Detalhes de Chamadas**, é liderado por Zhan Zhao, da Universidade de Hong Kong, ao lado de Haris N. Koutsopoulos, da Northeastern University em Boston, e Jinhua Zhao, do MIT. O objetivo deles? Aproveitar os registros de conectividade móvel — como dados móveis, SMS e chamadas de voz — de usuários altamente ativos para modelar e prever os padrões de movimento daqueles que usam seus telefones com menos frequência.
*Um esquema aproximado para extrair informações de viagem a partir de dados de Registro de Detalhes de Chamadas (CDR).* Fonte: https://arxiv.org/pdf/2106.12885.pdf
Embora a equipe reconheça as possíveis preocupações com privacidade que seu trabalho levanta, eles enfatizam que o objetivo é obter uma compreensão mais generalizada dos padrões de movimento, em vez de focar em trajetórias individuais. Eles também apontam que os dados de Registro de Detalhes de Chamadas (CDR), que são a base de tais estudos, têm suas limitações. Geralmente, possuem baixa resolução espacial e são suscetíveis a "ruídos de posicionamento" devido à mudança de posição do usuário em relação às torres de celular. No entanto, eles argumentam que essa imprecisão serve como uma salvaguarda de privacidade:
**‘A aplicação-alvo do nosso estudo é a detecção de viagens e a estimativa de OD$$ \* $$, que são feitas em nível agregado, não individual. Os modelos desenvolvidos podem ser implementados diretamente nos servidores de bancos de dados das operadoras de telecomunicações, sem a necessidade de transferência de dados. Além disso, em comparação com outras formas de big data, como mídias sociais ou dados de transações de cartão de crédito, os dados de CDR são relativamente menos intrusivos em termos de privacidade pessoal. Além disso, seu erro de localização ajuda a mascarar as localizações exatas do usuário, fornecendo outra camada de preservação de privacidade.’**
Intervalos de Tempo Decorrido (ETIs)
Quando estamos em movimento com nossos celulares, não necessariamente smartphones, as limitações dos dados de CDR como ferramenta para localizar nossa posição tornam-se claras. Os Intervalos de Tempo Decorrido (ETIs), aqueles períodos durante uma viagem em que não fazemos ou recebemos chamadas, são marcadores cruciais para rastrear nossos movimentos. Esses intervalos de "silêncio" podem nos fazer desaparecer temporariamente do radar.
Os pesquisadores destacam como essas lacunas interferem nos sistemas analíticos que tentam entender viagens de A>B. A escassez de dados pode estar escondendo uma "viagem não observada". O novo método deles aborda isso analisando o contexto espaço-temporal dos ETIs e considerando "as características individuais do usuário".
Conjunto de Dados
Para construir seu conjunto de treinamento principal, os pesquisadores usaram dados de uma grande operadora de serviços celulares em uma cidade chinesa com uma população de 6 milhões. Esse conjunto de dados incluiu mais de dois bilhões de transações de celulares de três milhões de usuários em novembro de 2013, focando exclusivamente em chamadas de voz e registros de acesso a dados. Notavelmente, eles não incluíram dados de SMS, o que aumentou o desafio de lidar com dados esparsos.
Os dados incluíam um ID único criptografado, um Código de Área de Localização (LAC), um carimbo de data/hora, um ID de celular vinculado ao LAC para identificar a torre de celular específica envolvida na transação e um ID de Evento indicando se era uma chamada de entrada/saída ou uso de dados.
*Árvore de processo para a identificação de visitas ocultas.*
Essas informações foram cruzadas com um banco de dados de operações de torres de celular, permitindo que os pesquisadores identificassem as coordenadas de longitude e latitude da torre associada a cada evento de comunicação. Eles identificaram 9.000 torres de celular dentro do conjunto de dados.
Os pesquisadores notaram a dificuldade em adivinhar com precisão os destinos das viagens com base apenas em registros de chamadas, já que esses registros atingem picos pela manhã e à tarde, o que se alinha com padrões de viagem típicos. Como as chamadas telefônicas podem preceder uma viagem e até mesmo desencadeá-la, isso pode distorcer a estimativa de destino.
*Padrões de uso de celular ao longo de um dia.*
Desafios semelhantes surgem com o uso de dados iniciado pelo usuário, como aplicativos de mensagens. No entanto, é o uso de dados "automatizado" — como a consulta sistemática de APIs para novas mensagens ou outros dados, incluindo GPS e telemetria em aplicativos — que ajuda a identificar esses movimentos ocultos.
Processamento
Os pesquisadores empregaram uma variedade de classificadores de aprendizado de máquina para abordar esse problema, incluindo regressão logística, máquinas de vetor de suporte (SVM), florestas aleatórias e uma abordagem de conjunto de aumento de gradiente. Esses foram implementados em Python usando scikit-learn com configurações padrão.
Entre esses, a regressão logística forneceu os parâmetros de modelo mais interpretáveis. A equipe também descobriu que ETIs mais longos aumentavam a probabilidade de uma visita oculta ocorrer, com maior incidência pela manhã. Por outro lado, quando os dados de CDR de um usuário mostravam claramente um alto número de destinos ou pontos de passagem, a probabilidade de uma visita oculta era menor. Essa descoberta suporta o princípio central de sua pesquisa — que os usuários mais ativos fornecem um quadro detalhado de seus movimentos, a partir do qual o comportamento de usuários menos ativos pode ser inferido.
Em sua conclusão, os pesquisadores sugerem que sua abordagem poderia ser aplicada a outros tipos de dados de trânsito, como dados de cartões inteligentes e informações de mídias sociais geolocalizadas.
A pesquisa foi apoiada por financiamento da Energy Foundation China e do China Sustainable Transportation Center.
*\* Origem-Destino*
Artigo relacionado
A Bayer utiliza a Iambic AI para acelerar a descoberta de medicamentos
O Dr. Juergen Eckhardt atua como chefe de Desenvolvimento de Negócios e Licenciamento da Bayer Pharmaceuticals.A Bayer está aproveitando a Iambic Therapeutics para implementar modelos de IA de ponta n
Meta enfrenta processo judicial por questões de privacidade relacionadas aos óculos com IA, já que funcionários teriam visualizado conteúdo explícito
A Meta enfrenta um novo processo judicial relacionado a questões de privacidade envolvendo seus óculos inteligentes com IA. De acordo com uma investigação realizada por jornais suecos, funcionários de
A IA orientada para a otimização surge como um novo caminho para modelos de uso geral
Pesquisadores da Universidade de Illinois Urbana-Champaign e da Universidade da Virgínia criaram uma nova arquitetura de modelo que pode abrir caminho para sistemas de IA mais resilientes com maior ca
Recomendações de tópicos especiais relacionados
Comentários (20)
Die Studie zeigt echt spannend, wie sich Bewegungsmuster aus Mobilfunkdaten extrahieren lassen. Gleichzeitig wirft das aber auch Datenschutzfragen auf – wer kontrolliert eigentlich, wie diese Infos genutzt werden? 🧐
Wait, so they're using ML to track our 'hidden visits' now? 😅 Always feels a bit creepy when tech peeks into those unregistered trips... but the data insights could be huge for urban planning or disease tracking, right? Still, makes me side-eye my phone a little more today 🧐
This study on tracking movements with phone data is wild! 😲 It’s like our phones are secretly spilling where we’ve been. Kinda creepy, but super cool how machine learning digs into those 'hidden visits.' Makes me wonder what else they can find out!
This article blew my mind! Using phone data and ML to track hidden visits is so cool, but kinda creepy too. 🤯 Wonder how they balance privacy with all this tech wizardry.
Se você já se perguntou como os pesquisadores rastreiam nossos movimentos por um país sem depender apenas de chamadas telefônicas, um estudo fascinante realizado por pesquisadores da China e dos Estados Unidos oferece algumas respostas. O trabalho colaborativo deles explora o uso de aprendizado de máquina para descobrir as "visitas ocultas" que fazemos — aquelas viagens que não aparecem nos dados de telecomunicações padrão porque não estamos usando nossos telefones o suficiente.
O estudo, intitulado **Identificando Visitas Ocultas a Partir de Dados Esparsos de Registro de Detalhes de Chamadas**, é liderado por Zhan Zhao, da Universidade de Hong Kong, ao lado de Haris N. Koutsopoulos, da Northeastern University em Boston, e Jinhua Zhao, do MIT. O objetivo deles? Aproveitar os registros de conectividade móvel — como dados móveis, SMS e chamadas de voz — de usuários altamente ativos para modelar e prever os padrões de movimento daqueles que usam seus telefones com menos frequência.
*Um esquema aproximado para extrair informações de viagem a partir de dados de Registro de Detalhes de Chamadas (CDR).* Fonte: https://arxiv.org/pdf/2106.12885.pdf
Embora a equipe reconheça as possíveis preocupações com privacidade que seu trabalho levanta, eles enfatizam que o objetivo é obter uma compreensão mais generalizada dos padrões de movimento, em vez de focar em trajetórias individuais. Eles também apontam que os dados de Registro de Detalhes de Chamadas (CDR), que são a base de tais estudos, têm suas limitações. Geralmente, possuem baixa resolução espacial e são suscetíveis a "ruídos de posicionamento" devido à mudança de posição do usuário em relação às torres de celular. No entanto, eles argumentam que essa imprecisão serve como uma salvaguarda de privacidade:
**‘A aplicação-alvo do nosso estudo é a detecção de viagens e a estimativa de OD$$ \* $$, que são feitas em nível agregado, não individual. Os modelos desenvolvidos podem ser implementados diretamente nos servidores de bancos de dados das operadoras de telecomunicações, sem a necessidade de transferência de dados. Além disso, em comparação com outras formas de big data, como mídias sociais ou dados de transações de cartão de crédito, os dados de CDR são relativamente menos intrusivos em termos de privacidade pessoal. Além disso, seu erro de localização ajuda a mascarar as localizações exatas do usuário, fornecendo outra camada de preservação de privacidade.’**
Intervalos de Tempo Decorrido (ETIs)
Quando estamos em movimento com nossos celulares, não necessariamente smartphones, as limitações dos dados de CDR como ferramenta para localizar nossa posição tornam-se claras. Os Intervalos de Tempo Decorrido (ETIs), aqueles períodos durante uma viagem em que não fazemos ou recebemos chamadas, são marcadores cruciais para rastrear nossos movimentos. Esses intervalos de "silêncio" podem nos fazer desaparecer temporariamente do radar.
Os pesquisadores destacam como essas lacunas interferem nos sistemas analíticos que tentam entender viagens de A>B. A escassez de dados pode estar escondendo uma "viagem não observada". O novo método deles aborda isso analisando o contexto espaço-temporal dos ETIs e considerando "as características individuais do usuário".
Conjunto de Dados
Para construir seu conjunto de treinamento principal, os pesquisadores usaram dados de uma grande operadora de serviços celulares em uma cidade chinesa com uma população de 6 milhões. Esse conjunto de dados incluiu mais de dois bilhões de transações de celulares de três milhões de usuários em novembro de 2013, focando exclusivamente em chamadas de voz e registros de acesso a dados. Notavelmente, eles não incluíram dados de SMS, o que aumentou o desafio de lidar com dados esparsos.
Os dados incluíam um ID único criptografado, um Código de Área de Localização (LAC), um carimbo de data/hora, um ID de celular vinculado ao LAC para identificar a torre de celular específica envolvida na transação e um ID de Evento indicando se era uma chamada de entrada/saída ou uso de dados.
*Árvore de processo para a identificação de visitas ocultas.*
Essas informações foram cruzadas com um banco de dados de operações de torres de celular, permitindo que os pesquisadores identificassem as coordenadas de longitude e latitude da torre associada a cada evento de comunicação. Eles identificaram 9.000 torres de celular dentro do conjunto de dados.
Os pesquisadores notaram a dificuldade em adivinhar com precisão os destinos das viagens com base apenas em registros de chamadas, já que esses registros atingem picos pela manhã e à tarde, o que se alinha com padrões de viagem típicos. Como as chamadas telefônicas podem preceder uma viagem e até mesmo desencadeá-la, isso pode distorcer a estimativa de destino.
*Padrões de uso de celular ao longo de um dia.*
Desafios semelhantes surgem com o uso de dados iniciado pelo usuário, como aplicativos de mensagens. No entanto, é o uso de dados "automatizado" — como a consulta sistemática de APIs para novas mensagens ou outros dados, incluindo GPS e telemetria em aplicativos — que ajuda a identificar esses movimentos ocultos.
Processamento
Os pesquisadores empregaram uma variedade de classificadores de aprendizado de máquina para abordar esse problema, incluindo regressão logística, máquinas de vetor de suporte (SVM), florestas aleatórias e uma abordagem de conjunto de aumento de gradiente. Esses foram implementados em Python usando scikit-learn com configurações padrão.
Entre esses, a regressão logística forneceu os parâmetros de modelo mais interpretáveis. A equipe também descobriu que ETIs mais longos aumentavam a probabilidade de uma visita oculta ocorrer, com maior incidência pela manhã. Por outro lado, quando os dados de CDR de um usuário mostravam claramente um alto número de destinos ou pontos de passagem, a probabilidade de uma visita oculta era menor. Essa descoberta suporta o princípio central de sua pesquisa — que os usuários mais ativos fornecem um quadro detalhado de seus movimentos, a partir do qual o comportamento de usuários menos ativos pode ser inferido.
Em sua conclusão, os pesquisadores sugerem que sua abordagem poderia ser aplicada a outros tipos de dados de trânsito, como dados de cartões inteligentes e informações de mídias sociais geolocalizadas.
A pesquisa foi apoiada por financiamento da Energy Foundation China e do China Sustainable Transportation Center.
*\* Origem-Destino*
A Bayer utiliza a Iambic AI para acelerar a descoberta de medicamentos
O Dr. Juergen Eckhardt atua como chefe de Desenvolvimento de Negócios e Licenciamento da Bayer Pharmaceuticals.A Bayer está aproveitando a Iambic Therapeutics para implementar modelos de IA de ponta n
Meta enfrenta processo judicial por questões de privacidade relacionadas aos óculos com IA, já que funcionários teriam visualizado conteúdo explícito
A Meta enfrenta um novo processo judicial relacionado a questões de privacidade envolvendo seus óculos inteligentes com IA. De acordo com uma investigação realizada por jornais suecos, funcionários de
A IA orientada para a otimização surge como um novo caminho para modelos de uso geral
Pesquisadores da Universidade de Illinois Urbana-Champaign e da Universidade da Virgínia criaram uma nova arquitetura de modelo que pode abrir caminho para sistemas de IA mais resilientes com maior ca
Die Studie zeigt echt spannend, wie sich Bewegungsmuster aus Mobilfunkdaten extrahieren lassen. Gleichzeitig wirft das aber auch Datenschutzfragen auf – wer kontrolliert eigentlich, wie diese Infos genutzt werden? 🧐
Wait, so they're using ML to track our 'hidden visits' now? 😅 Always feels a bit creepy when tech peeks into those unregistered trips... but the data insights could be huge for urban planning or disease tracking, right? Still, makes me side-eye my phone a little more today 🧐
This study on tracking movements with phone data is wild! 😲 It’s like our phones are secretly spilling where we’ve been. Kinda creepy, but super cool how machine learning digs into those 'hidden visits.' Makes me wonder what else they can find out!
This article blew my mind! Using phone data and ML to track hidden visits is so cool, but kinda creepy too. 🤯 Wonder how they balance privacy with all this tech wizardry.











