17 recursos do iPhone que usam aprendizado de máquina e IA
Neste guia, abordamos vários recursos existentes do iOS que usam Inteligência Artificial (IA) e Aprendizado de Máquina (ML) para fornecer recursos novos e poderosos ao seu iPhone e iPad.
Inteligência da Apple (termo da Apple para sua IA interna) foi anunciado junto com iOS 18 mas ainda não foi lançado. Ele deve trazer vários recursos como revisar sua escrita, alterar a estrutura das frases, resumir textos longos, trazer à tona os e-mails e notificações mais urgentes na parte superior, transformar seu esboço em imagens, limpar objetos desnecessários do fundo de uma foto e muito mais.
Embora a Apple Intelligence certamente leve os recursos de IA para usuários do iPhone para o próximo nível, vários aspectos existentes do iOS e iPadOS já dependem fortemente da Inteligência Artificial e do Aprendizado de Máquina. Veremos os mais importantes abaixo.
Antes de começar, você deve saber que IA e ML estão intimamente relacionados, mas se quiser entender as diferenças entre eles, Google Nuvem e AmazonAWS tenha artigos excelentes que realmente valem seu tempo.
1. Crie sua voz pessoal
Graças ao Machine Learning da Apple, as pessoas em risco de perder a fala podem crie uma voz artificial que soe como eles .
Esta réplica de voz sintetizada pode ser usada com o Recurso de fala ao vivo durante FaceTime, chamadas telefônicas, aplicativos e comunicação pessoal. O usuário pode simplesmente digitar o que deseja dizer e seu iPhone falará essas palavras escritas com sua voz!
2. Controle seu iPhone com os olhos
Você pode passe por um rápido processo de configuração do Eye Tracking , e o aprendizado de máquina no dispositivo da Apple pode descobrir os movimentos dos seus olhos para destacar itens e tocar apenas olhando. Isso é útil para pessoas que não podem usar a tela sensível ao toque devido a deficiências físicas.
3. Legendas e transcrição ao vivo no dispositivo
Seu iPhone pode entender o áudio e exibi-lo na tela em forma de texto. Isto pode, por exemplo, capacitar uma pessoa surda a usar legendas ao vivo em chamadas FaceTime ou enquanto assiste a vídeos. Isto também é útil em transcrever gravações de voz em memorandos de voz e Notas aplicativos.
Todo o processamento é feito localmente no dispositivo, sem conexão com a Internet, para garantir a máxima privacidade.
4. Encontre imagens por palavra-chave
O aplicativo Fotos permite que você encontre a imagem certa descrevendo-a . Por exemplo, você pode digitar “ pizza ”, e mostrará todas as suas fotos com pizza.
A Apple é capaz de analisar, indexar e compreender o conteúdo da sua foto usando inteligência avançada e aprendizado de máquina.
O próximo Apple Intelligence irá levar isso adiante, permitindo que você encontre a imagem certa usando termos longos e complexos como “ Sebastien de camisa azul e gravata preta ' ou ' Pam com adesivos no rosto .”
5. Retire o assunto principal de uma foto
Seu iPhone e iPad podem distinguir o assunto principal do resto da imagem. Como resultado, você pode remova seu cachorro de uma foto e use-o como um adesivo . Ou você pode retirar seu rosto de uma foto e colá-lo em outros aplicativos para fazer coisas como criando uma foto para seu pedido de passaporte .
6. Copie texto de imagens e vídeos
Se você tiver texto em uma imagem ou vídeo, você pode simplesmente toque nele e copie-o para a área de transferência . Seu iPhone é inteligente o suficiente para reconhecer texto em uma imagem e permite que você execute ações como se fosse algum texto em um documento do Word.
7. Reconheça pessoas e animais de estimação
O aplicativo Fotos pode reconheça pessoas e animais de estimação em suas fotos e coloque todas as fotos de uma determinada pessoa em um só lugar, que você pode acessar no Pessoas seção do aplicativo Fotos.
8. Conte mais sobre alimentos, flores, plantas, obras de arte e outras coisas
Ao abrir determinadas fotos no aplicativo Fotos, você poderá ver ícones especiais, como o botão de informações ⓘ com duas estrelas ou uma folha com estrelas. Toque nesse ícone ou deslize para cima para use a opção inteligente Visual Look Up .
Esse recurso inteligente é útil para obter mais informações sobre isso, mas lembre-se de que muitas vezes ele comete erros. Portanto, sempre verifique novamente.
Seu iPhone pode até decifrar símbolos de lavagem em etiquetas de roupas e dar-lhe mais informações sobre eles!
9. Filmagem automática para você
Além de reconhecer pessoas e animais de estimação, o seu iPhone tem a capacidade de crie memórias e vídeos curtos com base em um evento, data, viagem e outros parâmetros. Você pode encontrar essas mídias com curadoria especial no Recordações e Viagens seções do seu aplicativo Fotos.
10. Ajuda você a tirar fotos melhores
Estilos fotográficos , Fotografia Macro , Modo noturno , Fotos de retratos com desfoque de fundo e vários outros aspectos do aplicativo Câmera do iPhone dependem fortemente de cálculos e algoritmos avançados.
Por exemplo, quando você aperta o botão do obturador, seu iPhone pode capturar instantaneamente várias fotos e depois usar algoritmos de aprendizado de máquina para combinar os melhores aspectos de todas as imagens, resultando em uma única imagem que fica ótima com todos os detalhes, cores, realces, e brilho.
11. Oferece sugestões de registro no diário
O Aplicativo de diário no iPhone leva em consideração sua localização, horário, fotos, atividades recentes, gostos musicais e outros fatores para oferecer sugestões personalizadas. Isso pode ajudá-lo a criar rapidamente uma entrada no diário para que você possa relembrar o dia futuro. Todo o processamento para apresentar sugestões de registro no diário ocorre de forma privada no dispositivo, cortesia do avançado aprendizado de máquina no dispositivo da Apple.
12. Reconhecimento ao vivo em tempo real
Graças à inteligência do dispositivo, os recursos de reconhecimento ao vivo e VoiceOver do seu iPhone podem detectar pessoas, portas, textos, móveis e outros objetos ao seu redor e descrever o que eles são. Por exemplo, quando aponto para minha mesa de trabalho, ele diz corretamente: “ um teclado branco sobre uma superfície de madeira .”
Pode até explicar como abrir certas portas!
Você pode usar o modo de detecção ao vivo no app Lupa no seu iPhone.
13. Sugestões de aplicativos relevantes
Quer seja uma biblioteca de aplicativos, Widget de sugestões da Siri , Spotlight ou Lock Screen, o iOS usa aprendizado de máquina para entender seus padrões de uso e sugerir aplicativos e ações relevantes no lugar certo e na hora certa.
14. Rejeição da palma da mão ao usar Apple Pencil
É óbvio que a palma da mão ficará apoiada na tela quando você estiver escrevendo ou desenhando com o Apple Pencil. O iPadOS usa aprendizado de máquina para descobrir a diferença entre o toque do dedo, o apoio para as mãos e as entradas do lápis. Portanto, quando você desenha com um lápis, o software é inteligente o suficiente para ignorar os toques da palma da mão.
De forma similar, Rabiscar com Apple Pencil e converter manuscrito em texto digitado ou copiando-os também use algoritmos de aprendizagem avançados para fazer isso acontecer.
15. Otimize o carregamento e a longevidade da bateria
Mesmo algo tão simples como carregar seu dispositivo não deixa de ter aprendizado de máquina. À medida que você usa o dispositivo, o iPhone entende seus padrões de carregamento e uso e pode fazer alterações prolongar sua vida útil .
Por exemplo, se você conectar seu iPhone para carregar todos os dias antes de ir para a cama, seu iPhone irá pausar o carregamento depois de atingir 80% . Ele retomará o carregamento no momento certo para que, quando você acordar, seu telefone esteja 100%. Isso garante que a bateria do seu iPhone não fique 100% carregada por muitas horas à noite, ajudando assim a prolongar sua saúde.
16. Reconhecimento de som
Seu iPhone pode usar a inteligência do dispositivo para ouvir vários sons, como alarme de incêndio, batidas em portas, vidros quebrados, eletrodomésticos e muito mais, e notificá-lo sobre eles. Uma pessoa que não ouve pode usar reconhecimento de som para saber se alguém está tocando a campainha, por exemplo.
17. Reconhecimento facial
O Face ID já usa um sistema complexo para entender suas características faciais para autenticação.
Além disso, as capacidades de reconhecimento de pessoas do aplicativo Fotos podem ser usado com câmeras HomeKit para marcar sua família e amigos, ajudando você a saber quem está na porta.
Além dos recursos mencionados acima, diversas outras coisas, como previsões de teclado , sugestões de emojis , efeito de profundidade do papel de parede na tela de bloqueio , papéis de parede sugeridos com fundos coloridos, Siri off-line e muito mais também dependem do aprendizado de máquina.
A esta altura, você deve estar pensando que quase tudo no iPhone moderno é tocado por ML e IA, e você não estaria errado.
Vice-presidente sênior de IA e ML da Apple, João Giannandrea , disse há alguns anos que “ O aprendizado de máquina transformará todas as partes da experiência da Apple nos próximos anos ”, e está claro que suas palavras estão se tornando realidade.
Em uma nota relacionada: Requisitos de sistema para Apple Intelligence