o que tabi pode fazer, além de ditado
Uma semana de como eu realmente uso, e o que acontece em cada parte.
Por Nikhil Bhima, fundador do tabi
tabi é um app de voz para o Mac. Segure fn, fale, e as palavras caem onde estiver o cursor. Segure Control também e ele responde, reescreve ou responde por você. Selecione qualquer coisa e ele lê em voz alta.
As pessoas chamam de app de ditado. Justo, é por aí que começa. Isso é tudo mais que eu uso, todo dia.
Uma semana, contada
A maior parte do que eu escrevo agora começa como fala
tabi conta o que faz no meu Mac. Esses são os meus números na semana de 20 de setembro.
Ditado
Escrever falando
Segure fn, fale, solte. O que eu disse aparece como se eu tivesse digitado: os 'hums' e reinícios sumiram, pontuação no lugar, uma lista vira uma lista.
A maior parte do trabalho acontece enquanto eu ainda estou falando, então uma frase curta aparece instantes depois que solto, e até uma fala de um minuto espera só um pouco mais.
ah sim quinta não sexta funciona hum eu levo o build e a gente tipo passa por ele junto
Sim, sexta funciona. Eu levo o build e a gente passa por ele junto.
Segure fn e fale
- Sua voz
Voxtral Smallouve enquanto você fala
Mistral Mediumarruma enquanto vai- Seu cursor
Estilos
Cada app escreve como ele mesmo
O app que está aberto escolhe o estilo. Um e-mail recebe saudação e assinatura em linhas separadas, o Slack tem pontuação mais leve, uma mensagem fica solta. Um estilo só muda maiúsculas, pontuação e layout, nunca minhas palavras.
MailOi Sam,
Sexta funciona. Eu levo o build. Até lá.
Nikhil
SlackOi Sam, sexta funciona, eu levo o build, até lá
Nikhil
Mensagensoi sam! sexta funciona, eu levo o build, até lá
nikhil
Prompts
Prompts longos, ditos por completo
Um bom prompt para um chat de IA precisa do quadro todo: para quem é, o que eu já tenho, o que deixar de fora. Digitar tudo isso era onde eu costumava pular etapas. Agora eu só falo.
Funciona da mesma forma em um chat no navegador ou em uma ferramenta de código no terminal, onde nomes de arquivos, flags e caminhos saem exatamente como eu disse.
Vou apresentar o tabi em um meetup no sábado, dez minutos, principalmente desenvolvedores. Me ajude a dividir em três partes: o que ele faz, como foi construído e uma demo ao vivo. Deixe a demo por último e tire o preço.
segure fn e diga tudo
56 idiomas
Diga em um idioma, escreva em outro
o tabi entende cinquenta e seis idiomas e identifica o que você muda. Você também pode dizer em qual idioma ele deve escrever, então pode falar em hindi e enviar em inglês.
Vamos começar a reunião de amanhã um pouco mais tarde, por volta das onze.
“कल की मीटिंग थोड़ा लेट, ग्यारह बजे के आसपास शुरू करते हैं”
- Hindi
- Voxtralouve
- Mistral Mediumescreve em inglês
- Português
Perguntar
Perguntar, reescrever, responder
Segure fn e Control ao começar uma fala e ela vira um pedido, em qualquer idioma. O que acontece depois depende do que está na tela: nada selecionado, e ele responde; texto selecionado, e ele reescreve; peça uma resposta, e ele escreve uma para a mensagem na sua frente.
“como se diz te vejo na quinta em francês”
À jeudi !
Perguntar
A resposta aparece no cursor ou em uma caixinha acima do ícone quando não tem onde digitar.
então basicamente é o seguinte: o lançamento vai atrasar um pouco porque a parte de PDF precisa de mais testes
“deixa mais curto”
Reescrever
“O lançamento está atrasado: a parte de PDF precisa de mais testes.” Ele substitui o que eu selecionei.
a gente ainda faz a demo na sexta?
Sim, ainda faz na sexta. Você pode me mandar o link da sala?
“diz sim, pede o link”
Responder
Eu falo mais ou menos o que quero dizer, e a resposta é escrita na caixinha.
- fn + Control
- Voxtral Smallouve o pedido
- Mistral Mediumfaz o que você pediu
- Seu cursor
Ler em voz alta
Ouvir em vez de ler
Selecione qualquer coisa e pressione ⌃⌘R. Uma voz real começa a ler quase que na hora, em um player pequeno que posso pausar, pular ou acelerar.
Uso para verificar o que escrevi. Meus ouvidos pegam a frase truncada que meus olhos pulam. Pode até ler com uma cópia da minha própria voz.
Valeu pelas anotações no slide. Mudei o slide de preços para o final e tirei a segunda demo, então a apresentação toda agora dura pouco menos de dez minutos.
- Texto selecionado
- Voxtral TTSfala enquanto transmite
- O player
Listen
PDFs, livros e fotos, lidos para você
Listen é uma tela no tabi para coisas mais longas. Abro um PDF, um arquivo do Word, um EPUB ou uma foto de uma página, e ele lê com cada palavra marcada enquanto é dita. A página acompanha a voz.
Pode ler tudo em um de 37 idiomas ou salvar como áudio para ouvir enquanto caminha.
Capítulo 3. O porto
O porto estava calmo naquela manhã. Barcos de pesca ficavam baixos na água, suas redes já dobradas. Ninguém no cais parecia ter pressa, e as gaivotas tinham os degraus só para elas. Ao meio-dia, a maré mudaria, e a cidade toda se mexeria com ela.
14- Um PDF ou foto
Mistral OCRsó para digitalizações- Mistral Mediumpara traduzir
- Voxtral TTSlê em voz alta
Como tudo se encaixa
Quatro caminhos, todos pela Mistral
Tudo acima é um dos quatro caminhos, e cada parada neles é um modelo da Mistral.
- Voz
- Voxtral
- Medium
- Cursor
- Voz
- Voxtral
- Medium
- Resposta
- Texto
- Voxtral TTS
- Voz
- Arquivo
- OCR
- Medium
- Voxtral TTS
Por que isso é possível
Um laboratório que ouve, escreve, fala e lê
tabi consegue fazer tudo isso porque a Mistral já tinha todas as peças necessárias. Voxtral ouve e fala, Medium escreve, OCR lê páginas. Quando eu quis que tabi lesse PDFs digitalizados, o OCR já estava na mesma conta, atrás da mesma chave, sob a mesma política de privacidade. Não foi preciso adicionar uma nova empresa, nem um novo lugar para suas palavras irem.
Sua voz faz uma viagem, para uma empresa, e a gravação é descartada assim que vira texto. A história completa está em por que o tabi roda no Mistral.
Perguntas
O tabi é só um app de ditado?
Não. A ditado é por onde começa: segure fn, fale, e as palavras caem onde estiver o cursor em qualquer app do Mac. A mesma tecla também responde perguntas, reescreve texto selecionado e escreve respostas quando você segura Control junto, e tabi lê texto, PDFs, livros e fotos em voz alta.
O que posso pedir para tabi fazer?
Segure fn e Control ao começar uma fala, em qualquer idioma, e ela vira um pedido. Com nada selecionado, ele responde onde está o cursor. Com texto selecionado, ele reescreve esse texto do jeito que você pediu. Peça para responder e ele escreve uma resposta para a mensagem ou conversa que você selecionou.
O tabi pode ler texto em voz alta no Mac?
Sim. Selecione texto em qualquer app e pressione ⌃⌘R, e uma voz real começa a ler quase na hora. Para coisas mais longas, o Listen lê PDFs, arquivos do Word, EPUBs e fotos de páginas, marcando cada palavra enquanto é dita, em 37 idiomas.
Em quais apps o tabi funciona?
Em qualquer app do Mac onde você possa digitar: e-mail, chat, notas, documentos, o navegador e o terminal. Cada app pode ter seu próprio estilo de escrita, então um e-mail parece um e-mail e uma mensagem no Slack continua leve.
Qual IA o tabi usa?
Mistral AI, e nada mais. O Voxtral ouve você e lê em voz alta, o Mistral Medium escreve, e o Mistral OCR lê páginas digitalizadas. A Mistral não constrói, possui ou endossa o tabi.
Mais na página de perguntas, ou veja o que o tabi faz.