Google IO 2019
Estas são as minhas notas do Keynote do Google IO, divididas por palestrante e tópicos, à medida que foram sendo apresentadas.
Sundar Pichai
Para abrir o keynote, entrou em palco Sundar, começou por anunciar uma nova funcionalidade no recinto neste IO2019, usando as capacidades de realidade aumentada, podemos navegar pelo recinto do IO usando a aplicação Google IO, para tal basta abrir a app no ecrã “Explore I/O” abrindo a camera com o que indica a leitura de um QRCode, e é tal como indica, com este ecrã quando apontarmos para um dos vários mapas distribuídos pelo recinto activamos o AR e conseguimos visualizar a nossa volta os vários pontos de interesse, locais como de comida, sessões em que nos registamos, onde encontrar água e disseram que há uns quantos easter eggs para encontrar.
A Google está dedicada a resolver várias questões sociais, problemas estes que a Google já tem vindo a tentar resolver nos últimos 20 anos, no entanto a forma como se aborda estas questões, também tem vindo a evoluir.
Então esta amanhã, é dedicada a anunciar uma série de produtos mas que todos têm o mesmo objectivo, de serem prestáveis (“helpful”)
[Edit] Foi publicado o seguinte artigo https://blog.google/technology/developers/io19-helpful-google-everyone/ sobre este tema.
Já conhecemos exemplos de soluções que a Google encontrou como:
- Ajudar a escrever os emails mais rapidamente.
- Como chegar aos sítios mais rapidamente.
- Fazer backup das fotos e pesquisar com base num certo tópico.
Quem ser mais prestáveis com base nos pontos sucesso, ajuda e felicidade. É lhes um completo prazer desenvolver produtos que melhora a vida de milhões de pessoas.
Full coverage
É uma das novidades a aparecer na pesquisa da Google, é dado o exemplo de quando realizarmos uma pesquisa sobre Buraco Negro nos resultados vamos ver várias notícias relacionadas, e cada um desses resultados podemos perfeitamente distinguir o tipo de noticia, se é video, conjunto vários artigos ou mais visual. Juntamente, quando fizer sentido, até visualizamos uma linha temporal com a evolução da noticias.
Uma novidade é que irá aparecer nos resultados de pesquisa, Podcasts relacionados à noticia.
Aparna Chennapragada
Aparna, entrou em palco para nos introduzir a importância da visão, de como entendemos tanto o mundo através na nossa vista, como ver é compreender. ComComputer Vision e AR o telefone está a tornar-se numa ferramenta imprescindível sobre conhecimento. A camera vem por isso adicionar uma nova dimensão a pesquisa.
Por essa razão está a caminho uma nova funcionalidade de encontrar modelos 3D que podemos usar para melhor perceber o que queremos e encontrar o mais certo.
Por exemplo:
- Se pesquisarmos no Google por “Muscle Tension” no resultados poderá aparecer modelos 3D, que poderás selecionar e colocar o modelo em cima da mesa, um modelo de um braço e assim melhor compreender o que estás a ver.
- Ao pesquisarmos por sapatos, também surgirá um modelo que podemos visualizar em 3D ou colocar ao lado na nossa roupa e ver como irá ficar com a nossa roupa.
O último exemplo falado, e foi demonstrado, foi a pesquisa por um “Tubarão Branco” e ao selecionar o modelo respectivo no chão do palco, pudemos ver o modelo em tamanho real do tubarão e ficamos assim com melhor noção de um típico tubarão.
Google Lens
Entra o Google Lens, já usado mais de mil milhões de vezes, em conjunto com a camera, Google photos e o Assistant, a Google começa a a indexar o objectos do mundo real da mesma forma que a pesquisa indexa páginas online.
Casos de uso que virão em breve são exemplos como os mostrados
Imaginando que estamos num restaurante e não sabemos o que encomendar, ao apontar a camera ao menu, o Lens irá realçar sugestões, os pratos mais requisitados e respectiva pontuação, e ao clicarmos no prato pode surgir mais informação sobre o prato como descrição, fotos e comentário de utilizadores. Num futuro breve estará disponível até a funcionalidade de apontar a camera ao recibo ele vê quanto é o custo, pagar com o Google Pay e até dividir a conta com os amigos.
Um outro exemplo é que poderemos também usar a Lens numa revista, apontando para uma receita e começar um pequeno video a mostrar como a receita é feita.
Fora estes casos de uso, o Lens estando disponível para dispositivos Google Go, pode ser usado para ajudar milhões de pessoas. Pessoas que por exemplo podem não conseguir ler algo ou mesmo não saber ler de todo, então para tal, puxando a pesquisa do Google Search, ativar o “Google Lens” e apontar para o que é preciso ler, então será lido em voz alta o texto ao mesmo tempo que realça o que está a ser lido. Isto para a língua nativa ou traduzindo para uma outra lingua.
Foi então que mostram o video de Urmila, de Uttar Pradresh na India, que tem três filhos e por infelizmente não ter tido a educação que gostaria, não sabe ler. Ela então tira proveito do Google Lens para ir aprendendo a ler, para ajudar no dia a dia a ir ao multibanco, a comprar um bilhete de comboio.
Como o Google Lens está reduzido a uma mera aplicação de 100kb e compatível com dispositivos Google Go, existem telemóveis de 35$
[Nota] Neste momento começou a passar um avião por nós a puxar uma tira: “Google Control is not privacy #SaveLocalNews”
Sundar Pichai
Voltou Sundar a palco para apresentar novos produtos.
Duplex on the Web
Duplex foi anunciado o ano passado para reservas de restaurante mas agora estão a extender para acções para a internet, como por exemplo a reservar um carro. Já não é preciso navegar páginas e páginas online, ou vários ecrãs de uma app. Vamos poder simplesmente dizer ao Google Assistant: “Reserva-me um carro para o evento”, pois está tudo sincronizado com o nosso calendário, preferências, e email.
Tudo isto sem a empresa de aluguer de carros ter adaptado a esta funcionalidade.
Google Assistant ajuda com uma serie de tarefas em casa ou trabalho, para compreender a voz a Google usa vários algoritmos que resultam em modelos que necessitam 100GB disco e ligação à internet e ter isto no telemóvel.
No entanto conseguiram evoluir e reduzir o modelo 100GB para 0.5GB sendo assim possível ter tudo localmente no nosso telemóvel telemóvel, sendo na mesma rápido e eficaz, Sundar está confiante que é mais rápido que clicar em botões.
Scott Huffman
Para falar-nos mais sobre o Assistant Scott entra em palco.
Ao usarmos o Assistant, já está tão eficaz que usar o telemóvel como temos vindo a usar, parece… lento.
Entra o “Next Generation Assistant”, a nova versão do Assistant.
Next Generation Assistant
Começou uma demonstração sobre este novo Assistant, em palco e em tempo real com um telemóvel a assistente realizou as seguintes ações no telemóvel usando só a voz.
“Hey google open calendar”
“Open calculator”
“Open photos”
“Set a timer”
“Hows the weather today”
“How about Tomorrow?”
“Show John legend on youtube”
“Lyft ride to hotel”
“Turn flashlight on”
“Turn off”
“Take selfie”
Tudo isto em menos de 1minuto e só teve de dizer “Hey Google” uma vez, ia navegando entre as várias aplicações e funcionalidades do telefone.
Estas funcionalidades também são interativas com elementos externos como por exemplo, receber uma mensagem. Ao receber uma mensagem podemos pedir ao Assistant para interpretar o que dizemos para texto, e sabendo o contexto de quem enviou a mensagem, de procurar as fotos das férias juntos, escolher uma que tenha um animal e enviar essa foto por mensagem.
Para além disso, foi demonstrado como redigir um email só por voz é tão fácil, basta ir ditando o conteúdo do email e com certas palavras chave editar o “título” e enviar o email, sem uma vez clicar num botão.
Esta nova versão do Assistant chega para os novos Pixels no fim deste ano.
Esta nova versão do Assistant não só estão a trabalhar para que seja rápido mas também que seja personalizado à pessoa. Pois duas pessoas têm gostos diferentes.
Pics for you
É a nova categoria de resultados do Google Assistant, pois a seguinte frase:
- “Hey Google, How’s the traffic to my Mom’s house”
Dependendo da pessoa, pode significar a casa da mãe, a sede de uma associação sem fins lucrativos, ou mesmo um restaurante.
Na zona de Personal References podes definir a casa da tua mãe e pedir ao Assistant para assim no futuro pedires para mostrar “fotos da mãe”.
Driving Mode
Assistant pode ser extremamente útil enquanto conduzimos e para tal, desenvolveram o “Driving Mode” e que será publicado com o Waze nas próximas semanas. Para o ativar basta dizer:
“- Hey google, lets drive!”
Uma vez ativo, será apresentado sugestões úteis para o nosso percurso, chamadas, contactos, recomendações de músicas ou mesmo podcasts para ouvir ou continuarmos a ouvir quando entramos no carro.
Nada disto será necessário fazer download, ficara disponível este Verão para todos os telemóveis com o Google map.
[Nota: Apresentaram neste momento o mapa onde iria ficar disponível e Portugal não estava incluido.]
No fim, na minha opinião a melhor funcionalidade. Ao tocar o alarme, basta dizer “STOP” para ele parar de tocar.
Sundar Pichai
“Build a more helpful Google for everyone”
Foi a frase com que começou. Falou no “Grow with Google” uma plataforma gratuita para que a aprendizagem esteja disponível a todos.
AI for everyone
Bias é um grande preocupação mesmo antes de Computer Science, não basta saber que um modelo funciona mas como funciona e perceber se é tendencioso.
Focando então na transparência mas como?
Pois os algoritmos vêem as features em low level, pixeis basicamente.
Entra o TCAV…
TCAV
Quando estamos a tentar identificar uma Zebra numa foto, importante é perceber se tem riscas, se é um cavalo ou se se encontra numa Savana, este é a importância de “Prediction Factor” pensando assim, quando queremos identificar um médio, os fatores para a previsão mudam, passam certamente para perceber e é uma pessoa, que usa uma bata e tem um estetoscópio.
Focando nos fatores de previsão conseguimos minimizar ou perceber melhor se o algoritmo de modelação da inteligência artificial está a ser tendencioso.
Privacidade e segurança
A Google foi inovadora em várias funcionalidades, como o modo incógnito em 2008, o Google Takeout em 2011 e querem continuar a frente nesta area, então a partir de hoje, vamos poder aceder às definições de “Privacidade e Segurança” mas facilmente através de atalhos tanto no Google Photos ou enquanto procuramos algo.
Auto Delete control
Foi também adicionado a funcionalidade “Auto delete control” onde podemos escolher o que será apagado, podemos então escolher para apagar todos os nosso dados recolhidos com mais de 30 dias.
“Incognito Mode” no Google map!
(Será adicionado no Youtube em breve)
Poderemos usar o Google map, sem receito que a Google estará a recolher a nossa localização, não ficará nada associado ao nosso perfil e poderemos navegar e pesquisar no Google Map sem receio.
Android phone as Security Key
Juntamente com o Autenticação de dois fatores e com FIDO2 o nosso telemóvel servirá de autenticador, poderemos autenticar-nos com uma simples notificação e um toque de dedo.
Federated Learning
Em vez de enviar os nossos dados para o servidor, só os modelos, os resultados obtidos é que serão enviados para o servidor, e depois esses resultados serão usados para melhorar o modelo “global” e usado para actualizar todas as outras aplicações e funcionalidades.
Live transcribe
A Organização mundial de saúde diz que 50% tem algum tipo de incapacidade e a inteligência artificial é ideal par ajudar essas pessoas, pessoas como por exemplo, surdas.
Entra o Live transcribe que pode ajudar essas pessoas em tempo real, pois interpreta o que é dito para texto e assim quando alguém falar irá traduzir voz para texto.
Live Caption
Não é só numa conversa que é importante para um surdo, para videos no youtube, pequenos videos no nosso Google Photos e até Podcasts (!), vamos poder ativar a função “Live Caption” traduzindo o som para texto e assim qualquer pessoa surda, poderá perceber o que está ser dito.
Da habilidade de ver qualquer video sem perturbar as pessoas a volta.
Live Relay
Como poderá uma pessoa surda atender um telefone sem ser video chamada? se calhar a pessoa que está a ligar também não sabe linguagem gestual.
Com Live Relay, um surdo ao atender uma chamada pode ativar esta funcionalidade e em vez de voz será tudo passado para texto e o surdo poderá ao mesmo tempo responder por texto e o Live Relay irá transformar o texto escrito para voz.
Basicamente, passa a haver uma comunicação entre Texto e Voz com cada pessoa a usar um dos meios.
Projecto Euphonia
Falou-se de pessoas com surdez, então e as pessoas que não são capazes de falar ou têm dificuldades que fazem que não sejam bem compreendidas. Podem sofrer de Esclerose Múltipla, podem terem sofrido um Acidente Vascular Encefálico ou serem gagos.
O reconhecimento de voz faz com que seja possível que estas pessoas sejam compreendidas. Faz com que se possa relacionar sons ou acções a frases completas, ou então pessoas paralisadas do pescoço para baixo e quem antes tinha de usar um teclado para construir com o olhar para selecionar as letras, AI pode facilitar em muito o processo.
Sundar Pichay: “To understand and to be understandable is amazing”
A Google está então focada no projecto Euphonia, com o objetivo de ajudar estas pessoas a serem compreendidas
Virá no futuro. Se tens ou conheces alguém com problemas de voz em falar vai ao sítio a cima e ajuda a mais pessoas serem melhor compreendidas.
Stefani Cuthbertson
Mudando o tópico para agora Android com Stefani.
Android Version 10 — Q
Para a nova versão a Google focou-se em três grande temas
- Innovation
- Security & Privacy
- Digital Wellbeing
O Android já está instalado em mais de 2500 milhões de dispositivos e têm como parceiros mais de 180 fabricantes de telemóveis mas também estão muito felizes com as inovações que estes fabricantes irão trazer para o mercado e o Android está a acompanhar essas tecnologias.
Telemóveis Dobráveis
Dispositivos dobráveis estão a começar a surgir no mercado e para aproveitar os diferentes
Foldable coming to multiple devices no futuro, aproveitam de novos ecras de telefone para Tablet, excelente spara multiple tasking,
##### Screen continuity,
se estivermos a jogar no telemovel com ele dobrado, se o desdobrarmos o jogo continua
#### 5G
Android Q 5G aceita nativamente, 20+ carriers com redes 5G preparados.
#### Live Captions
Tem varis funcionalides, abrir, mover, mas não rpecisa de estar ligado a internat!
#### Smart reply
Agora também agora pode sugir acções como se fosse acções.
Curiosamente durante o exemplo mostram a app Signal
#### On-device Learning
É um grande foco, tudo fica no telemovel
#### Dark Theme
Virá ao Android Q!
#### Google Play Protect
Gartner report of this week
26 of 30 — highest rating for Android.
50 Features only for security & privacy, uma nova opçõa nos settings para configurar tudo.
#### Location
Se estivermos perdidos, mas a localização é do mais importante de todo, agora podemos ver que apps estão a recolher informação ou não, relembrando regularment.
“Allow only while using the app” é a nova decisã que podemos escolher
#### Faster security updates
OS modules sobre compatibility security privacy, updates sem ter de fazer reboot ao telemovel (Whats new in Android)
Virá um blog post em breve da Google com mais informação
#### Digital Wellbeing
Wind down (27% ajudam a dormir)
flip to shh
app timer (90% a estar no tempo
dashboard
#### Focus model
Escolher as apps que distraem, P & Q this falle naõ vão
#### Parental Controls
Media 8 anos para ter um telemvoel
Daily screen time limits.
Review Apps
Set daily limits
“Bonus time”
Há muito mais mas para Q
Q virá para muitos outros OEM, 10!
android.com/Beta
## Rick Osterloh
AI + Software + Hardware
A app Home etáfragemntada e dificil de usar. Como juntar tudo?
“You make a house a home
We make a home a nest”
### Nest
Tudo será agora chamado Nest. sob a
* Easy for evryone
* Personal for everyone
* Works together
* Respects your privacy
Home Hub -> Nest Hub
Novo produto: Nest Hub Max!
Com camera e 10" display. interligado com tudo o resto
Pode ser usado como “Nest camp” atraves da “Nest app”
Google Duo tb irá funcionar no Nest Hub. Faz zoom no movimento.
Aparece sempre a luz verde quando está ligado
Tem um botão fisico para desligar a camera e voz. Diz que desliga electricamente tudo
#### Face match
Para abrir o hub podemos reconhecer a cara e mostra a tua informação e não de outra pessoa.
Vidoe messages, recomendações, agenda…
Também serve para mostrar fotos e ficar em cima do bano.
Podemos partilhar as fotos que estão a mostrar.
Youtube Tv, serve a mlehor para mostrar fotos.
Stereo sound.
Com um movimento podmeos mandar parar !!!
Nest Hub Max
US, UK, AU — $229
Nest Hub — $129
### Google Pixel
Google Pixel 3a e Pixel 3XL
$399
## Sabrina Ellis
Cores:
Just Black
Clear White
Purple-ish
* Bluetooth
* Jack
Camera
Em vez de camera focar em hardware, baseia-se em software
### Com portrait mode.
Para mostra blur antes
### Super Res Zoom
Zoom mais.
### Google Pixel + Google Maps
AR coming to the Google Map, to show where to go!
### Battery Life
Adapted battery, ML on how you use the phone.
30 hours of single charge.
7 hours with 15 min of charge.
### Security
Titan’ chip para proteger o que suas.
3 years of security and software updates
### Vendores
Muitos outros carriers
## Jeff Dean
Google AI
Focam-se em resolver problems reals como de speech Recognition, computer vision
Publicam papers, partilhar software e aplicam os resultados nos produtos da Google
MAior parte do tempo é compreender texto então querem focar que os computadores tenham a mesma fluidez a perceber texto como nós.
### BERT
Modelos que compreendem o contexto completo da palavra, vendo o texto antes e depois da palavra.
[Fim parte I]
