CONSTRUYO una IA que ANALIZA VIDEOS de Youtube con CLAUDE3 

¡Gracias!

Gracias por tu comentario y por el apoyo!! 😁

😁

Pues no lo he probado.. pero sí, sería una buena alternativa para reducir coste y tiempo de ejecución. La calidad de los captions de RU-vid no es tan buena, pero para algunos casos probablemente sea suficiente.

Bueno, ya digo en el título que utilizo Claude3...😅

Siempre hay uno que le busca el pelo al huevo. El chabon se esfuerza para hacer un video que enseña a hacer cosas interesantes, aprender cómo funcionan los modelos y crear usos prácticos, y vos salís con este comentario.

Hola! En el curso enseño a añadir funciones a un Asistente de OpenAI, que es lo que permite conectar el Asistente con cualquier otra aplicación externa, en tu caso sería la base de datos que comentas. Es decir, que sí, deberías ser capaz, aunque también dependerá de tu conocimiento técnico sobre bases de datos y de la complejidad de las consultar que quieras que realice el asistente.

Tengo pendiente subir contenido explicando cómo utilizar modelos open-source, probablemente lo haré en las próximas semanas/meses!

quieres decir que se puede descargar el modelo de whisper para ejecutarlo en local?

from transformers import AutoModelForSpeechSeq2Seq, AutoProcessor, pipeline from datasets import load_dataset device = "cuda:1" if torch.cuda.is_available() else "cpu" #tarjeta 3 torch_dtype = torch.float16 if torch.cuda.is_available() else torch.float32 model_id = "openai/whisper-large-v3" model = AutoModelForSpeechSeq2Seq.from_pretrained( model_id, torch_dtype=torch_dtype, low_cpu_mem_usage=True, use_safetensors=True ) model.to(device) processor = AutoProcessor.from_pretrained(model_id) pipe = pipeline( "automatic-speech-recognition", model=model, tokenizer=processor.tokenizer, feature_extractor=processor.feature_extractor, max_new_tokens=128, chunk_length_s=30, batch_size=16, return_timestamps=True, torch_dtype=torch_dtype, device=device, )

Sí, efectivamente. Esa es una de las razones por las que he decidido utilizar Whisper, porque al ser un modelo open-source podría optimizar mucho su coste si en algún momento quisiera hacerlo. ¡Gracias por comentarlo!

Si no hay voz no funcionará, el contexto que le doy a Claude3 es la transcripción del vídeo, por lo que no tiene la capacidad de ver qué se está mostrando en el vídeo.

Pues con Spotify es más complicado... la API de Spotify no te proporciona el audio ni la transcripción de sus contenidos, y no parece existir tampoco ninguna librería de Python que te permita hacerlo :(