Perguntar à IA sobre uma foto ou captura de ecrã e verificar o que leu
Pergunte à IA sobre uma foto ou captura de ecrã e obtenha uma resposta que pode verificar: prepare a imagem, peça primeiro uma transcrição e deixe de fora os dados privados.
Para perguntar à IA sobre uma foto, anexe uma imagem nítida de uma só coisa, peça-lhe que transcreva o que vê antes de responder e confira essa transcrição por si. Muitas respostas erradas começam num dia, número ou unidade mal lidos, não num mau raciocínio.
Este guia trata da imagem, do pedido, da verificação e do que uma aplicação envia, não da criação nem da edição de imagens. O Mono da Reunified aceita fotos na conversa, mas ainda não foi lançado (inscreva-se na lista de espera), por isso use este método com qualquer assistente que aceite imagens.
1. Decida se uma foto é a entrada certa
Uma foto ajuda quando a disposição dos elementos tem significado: uma placa na rua, um formulário em papel, um gráfico ou uma mensagem de erro que não consegue copiar. Quando tem o texto ou o ficheiro original, use-o em vez da foto. Um texto copiado não pode ser mal lido.
Não confie na IA para identificar um cogumelo, um comprimido ou qualquer coisa em que um erro possa fazer mal a alguém. Pergunte a uma pessoa qualificada.
O exemplo deste guia é inventado. Quer estacionar no domingo a partir das 10:00 durante três horas, junto a uma placa que diz:
2 HOUR PARKING
08:00-18:00 MON-SAT
ZONE B PERMIT HOLDERS EXCEPTED2. Prepare a imagem
Antes de tirar ou enviar a fotografia, verifique:
- Uma só coisa: recorte a imagem para ficar só a placa, a caixa de diálogo ou a linha da tabela sobre a qual pergunta.
- Luz e ângulo: sem reflexos, e com a câmara de frente para o texto.
- Ecrãs: faça uma captura de ecrã, não uma foto do ecrã.
- Dados de outras pessoas: recorte ou tape caras, nomes e matrículas.
As fotos tiradas com o telemóvel também podem guardar a localização. O guia da Apple sobre metadados de localização nas Fotografias mostra como a remover no iPhone: abra a fotografia, escolha o botão Mais e depois Ajustar informação, Ajustar localização e Sem localização. Para que as novas fotos deixem de a guardar, defina Definições > Privacidade e segurança > Serviços de localização > Câmara como Nunca. No Android, o Google Fotos não consegue remover uma localização adicionada pela câmara, por isso desative a definição de localização da câmara, como a opção para guardar a localização («Save location»), antes de tirar a foto.
A lista de verificação de privacidade na IA ajuda a confirmar quem recebe o que envia.
3. Peça uma transcrição antes da resposta
Anexe a foto e peça primeiro a leitura. Caso contrário, não consegue saber se a resposta veio de uma palavra mal lida:
First, transcribe every word and number on the sign exactly as written.
Write [unreadable] for anything you can't read with confidence.
Then answer: can I park here on Sunday from 10:00 for three hours?
Quote the line your answer depends on.A linha citada indica que parte da foto deve verificar.
4. Verifique o que a IA leu
Amplie a foto original, não a pré-visualização na conversa. Compare todos os elementos que possam mudar a resposta:
| Elemento | A IA leu | A foto mostra |
|---|---|---|
| Dias | MON-SUN | MON-SAT, em parte sob um reflexo |
| Horário | 08:00-18:00 | 08:00-18:00 |
| Limite de tempo | 2 HOUR | 2 HOUR |
A primeira transcrição leu «MON-SUN» (segunda a domingo), por isso a resposta disse que três horas ultrapassariam o limite. Discutir com a IA pode render um pedido de desculpa e outro palpite. Se conseguir ler a linha, escreva-a na conversa. Se não conseguir, ou para tudo o que estiver marcado como [unreadable], tire outra foto mais de perto e sem reflexos. Aqui, a nova foto mostra «MON-SAT» (segunda a sábado), e a resposta muda: não há limite indicado para domingo.
Numa imagem com muita informação, como uma ementa completa, pergunte por uma zona de cada vez. Dias, horas, separadores decimais, unidades e caracteres parecidos (0 e O, 1 e l) merecem o olhar mais atento. O guia de verificação de factos aplica as mesmas verificações a respostas em texto.
5. Verifique o que a sua aplicação envia
Anexar um ficheiro nem sempre significa que a IA o lê. Para testar, peça um valor exato da segunda página do ficheiro e compare. Se a resposta não o conseguir citar corretamente, o conteúdo pode não ter chegado.
No Mono, o menu «+» da conversa oferece Fotos e Arquivos, e também Câmera no iPhone e no Android. Eis o que o Mono envia em cada caso:
| O que anexa | O que segue com a sua mensagem |
|---|---|
| Uma foto ou captura de ecrã | A imagem |
| Um ficheiro Markdown | O texto do ficheiro |
| Um PDF ou qualquer outro ficheiro | Apenas o nome, como «[Arquivo anexado: …]» |
Para um PDF, cole o texto de que precisa ou anexe uma captura de ecrã da página. Se usar o seu próprio modelo de texto, o Mono envia as imagens para esse modelo, que pode não as aceitar. O guia para ligar um modelo personalizado mostra o que verificar.
6. Guarde o resultado e confirme-o
Guarde a transcrição verificada com a sua conclusão e a data: «A placa diz 08:00-18:00 MON-SAT. Sem limite indicado para domingo. Verificado a 11 de outubro.» Se exportar uma conversa do Mono para Markdown, a foto passa a ser um marcador «Imagem», por isso é a sua transcrição que guarda o conteúdo. O guia de exportação de conversas indica o que mais o ficheiro inclui.
Quando um erro lhe puder sair caro, como uma multa ou um prazo perdido, confirme na fonte oficial. No exemplo, são as regras de estacionamento do município.
Depois apague as fotos de que já não precisa, sobretudo as que mostram outras pessoas ou moradas. O Mono ainda não está disponível, mas pode inscrever-se na lista de espera e usar este método na conversa do Mono quando tiver acesso.
