Da Project Astra a Veo. Tutte le novità di Gemini presentate al Google I/O 2024 in sei video

Eravamo rimasti pochi mesi fa a dicembre scorso con il primo modello multimodale Gemini 1.0 in tre diverse versioni: Ultra, Pro e Nano. In meno di sei mesi abbiamo conosciuto Gemma i loro chatbot open source e Gemini 1.5 Pro, caratterizzata da migliori prestazioni e capacità di ragionamento multimodale. Con l’ultimo Google I/O di maggio numerose nuovi chatbot e tecnologie di intelligenza artificiale generativa sono state rilasciate. Ecco in sintesi le novità.

Cosa è Gemini 1.5 Flash? E’ un modello più leggero rispetto a 1.5 Pro e progettato per essere veloce e più facilmente distribuibile a scala.

 

 

Project Astra. E’ un progetto per costruire un agente AI tuttofare. Siamo entrati nell’era degli assistenti di AI che affiancheranno gli utenti nella vita quotidiana (attraverso lo smartphone o un paio di occhiali intelligenti) con doti estremamente avanzate per recepire e ricordare ciò che vedono, comprendere il contesto e agire imparando dal dinamismo dell’ambiente in cui operano.

Cos’è Gemini Live? Questo è il prodotto Google più paragonabile a GPT-4o, una versione del modello AI dell’azienda con cui puoi parlare in tempo reale. Google afferma che sarai anche in grado di utilizzare lo strumento per comunicare tramite video in diretta “entro la fine dell’anno”. L’azienda promette che sarà un utile assistente alla conversazione per cose come prepararsi per un colloquio di lavoro o provare un discorso.

Ecco Gemma 2. Siamo già alla secondo versione della nuova generazione di modelli aperti che sfrutta anche una nuove architettura dedicata.

Gemini in Workspace. Le funzionalità di Gemini saranno disponibili per un maggior numero di utenti e si integreranno nel pannello laterale di Gmail, Documenti, Drive, Presentazioni e Fogli. Le funzionalità di Gemini saranno aggiunte anche all’app mobile di Gmail

 

Cosa è Veo? E’ un  nuovo modello text-to-video progettato per competere con Sora di OpenAI e altri modelli di generazione video quali Pika, Runway e Irreverent Labs. È capace di catturare diversi stili visivi e cinematografici, inclusi paesaggi e time-lapse. Veo è basato sui modelli di generazione di video, tra cui Generative Query Network (GQN), DVD-GAN, Imagen-Video, Phenaki, WALT, VideoPoet e Lumiere, e offre una combinazione di architettura, leggi di scala e altre tecniche innovative per migliorare la latenza e la risoluzione dell’output.

Ecco Music Ai Sandbox. In questo blog abbiamo tracciato molti progetti di Ai generativa applicati alla musica perché lo consideriamo un campo di grandissimo interesse. Google in partnership con YouTube,  sta sperimentando “cose” nuove con alcuni  musicisti, autori e produttori. Lyria, è la famiglia di modelli più avanzata per la generazione di musica con l’IA.

Nell’ambito di questo lavoro, è nata la suite di strumenti per la musica Music AI Sandbox. Questi strumenti sono pensati per offrire nuove possibilità creative, permettendo alle persone di creare da zero nuove sezioni strumentali, trasformare il suono in nuovi modi e molto altro ancora.

Come funziona Ai Overview.  Precedentemente nota come Search Generative Experience (SGE)  Ai Overview ha spiegato la nuova capa di Google Search Liz Reid “Può toglierci gran parte del duro lavoro della ricerca, in modo che possiamo concentrarci sulle parti che vogliamo fare per completare le attività o sugli aspetti dell’esplorazione che troviamo più entusiasmanti”. Le demo che sono state mostrate e che potete vedere qui sotto indicano la capacità di riassumere la risposta alla nostra domanda insieme a link per approfondire. Quindi non siamo completamente dentro all’Ai generativa, la risposta non è solo testo in linguaggio naturale ma ci sono anche i link. Un modo per “salvare” l’esperienza e i punti di forza della ricerca di Google. Qui il post di Info Data

Per approfondire. 

AI Overview, come cambia il motore di ricerca di Google con Gemini?