Тёмный

Я запустил свою нейросеть-аналог ChatGPT на ноутбуке 

Миша Ларченко
Подписаться 58 тыс.
Просмотров 45 тыс.
50% 1

Опубликовано:

 

26 сен 2024

Поделиться:

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист
Посмотреть позже
Комментарии : 150   
@MrCommanderKid
@MrCommanderKid Год назад
Я та к понял, чем сильнее GPT запрещают, тем сильнее желание Михаила всякие GPT у себя напозапускать😎😎😎
@kimtyatya
@kimtyatya Год назад
Михаил панк и жесткий чел
@AlexLife307
@AlexLife307 Год назад
Так отлично же- это двигатель прогресса. У каждого своя кнопка запуска. Супер.
@Germesych_game
@Germesych_game 5 месяцев назад
у меня аналогичное желание.🤣 LlaMA 70b огонь огненный.😁
@railnick264
@railnick264 3 месяца назад
Благодарю за данное видео, а также прикрепленные ссылки. Вопрос о локальных чат-ботах стоял ещё с момента первого знакомства с умными чат-ботами.
@andreyniqi9007
@andreyniqi9007 Год назад
Спасибо! То что нужно, а то уже хотел сам разбираться
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
она не работает на винде,скачиваешь патчи а окно с закачкой не убрать
@romanbolgar
@romanbolgar Год назад
Для меня приватность не проблема. Мне утаивать нечего Логины и пароли естественно вводить в нейросеть не собираюсь. Ну вот другое преимущество Это не зависит от интернета и разработчиков. Возможность настроить под себя Обучить на каких-то определённых интересных мне данных. Вот про это бы поподробнее. Пока к сожалению такого нет Но надежда Microsoft Вроде бы уже изобрле какой-то аналог Copilot . На данный момент пользуюсь простенькой утилитой Laitis В которой можно настроить голосовые команды. этот текст наговариваю тоже с помощью неё. Очень странно что до сих пор голосовые помощники не объединят с интеллектуальными чатами. До сих пор какой-то интерфейс в консоли. Они что не могут говорить как в фильме "Она"? Впрочем, уже естьсторонние расширения которые дают им возможность говорите а не просто писать текст И не только говорить но и слушать.
@chonme
@chonme Год назад
Можно примеры таких расширений?
@Aziz108
@Aziz108 Год назад
Наконец-то, а то уже сам хотел писать свою. нейронку)
@konstantin7406
@konstantin7406 Год назад
Михаил, можно ли регулировать размер контекста в GPT4ALL ?
@ДенисПустовий-з3х
@ДенисПустовий-з3х 10 месяцев назад
Спасибо за видео
@lortta
@lortta 18 дней назад
У меня есть сервер локальный. Оперативы 128 и 60 ядер. Потом попробую. Спасибо большое
@amelinka9533
@amelinka9533 4 месяца назад
Здравствуйте. Скажите, пожалуйста, оригинальный чат gpt кем-то модерируется? Я слышала, что там нет ответов по религии.
@shoninryu
@shoninryu Год назад
Все следили за ногами на дальнем плане слева в кадре?)
@dashakoval3534
@dashakoval3534 Год назад
😂😂 не надо за моими ногами следить.
@emuzaurus
@emuzaurus Год назад
Запрещают нейросети неудачники у которых нет своих нейросетей
@Pro-tk5nw
@Pro-tk5nw Год назад
Миш, как ты думаешь. Ситуация такая, раньше я сам писал код, учился на ютубе, делал небольшие пет проекты, сейчас сильно обленился и все делаю через чат gpt, он сам полностью пишет весь код, я прописываю то что мне нужно, сейчас поймал себя на мысли, что я теперь не настоящий программист, учусь как раз на аналитика и машиное обучение и подобное, можешь сказать мне я правильную мысль поймал или нет
@Andrew-7324
@Andrew-7324 Год назад
Мы все деградируем за полгода, разучимся писать. Вот я без калькулятора уже не смогу что-то посчитать например
@PythonDevelopment
@PythonDevelopment Год назад
У всех эта проблема началась с начала года. Я уже подумаю что будет дальше. Код перестал писать как раньше.
@union-svcomunion-isthebest6650
Это ждёт всех. Но знаешь, если тебе будет легче, могу сказать, что в своё время было немало критики в сторону windows, типа это игрушка а не os
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
@@Andrew-7324 не все! повторю хочется нейросеть создай и обучи
@temuriosebadze
@temuriosebadze Год назад
Большое спасибо.
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
на винде10 работает?
@temuriosebadze
@temuriosebadze Год назад
@@marvinheemeyer7027 вопрос не ко мне, а к Мише. Я пока что "ученик". Я загорелся идеей создать, собственную, не зависимую от других нейро сеть, точнее, независимого от кого-либо (в том числе и от меня) робота с Искусственным Интеллектом ( электронный клон моей личности😄), который будет делать лишь добрые дела и помогать человечеству развиваться БЕСПЛАТНО, благодаря встроенному в его "мозгу" алгоритмов Морального, Гуманного, Социального, познавательного поведения (эта идея ничего общего не имеет с попытками тех современных психически ненормальных людей, которые хотят создать и вживить в человеческий мозг чипы, чтобы под предлогом помощи больным людям и вроде бы с целью профилактики болезней, управлять людьми, удовлетворить своё патологическое желание властвовать над другими.
@stalnyj
@stalnyj Год назад
подскажите какую модель выбрать для русского языка? я попробовал пару моделей - они только на английском отвечать могут
@PythonDevelopment
@PythonDevelopment Год назад
Учианглийский очень полезно будет именно вот так учить
@stalnyj
@stalnyj Год назад
@@PythonDevelopment не всегда английский нужен. Нужны текста на русском изначально без танцев с бубном.
@ВладимирБойченко-у1ц
@ВладимирБойченко-у1ц 11 месяцев назад
Запрашивай текста на англ и переводи через DeepL
@stalnyj
@stalnyj 11 месяцев назад
@@ВладимирБойченко-у1ц так и делаю ) а потом редактирую тексты с помощью AI ))
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
слабый пк это конечно плохо но иногда можно решить проблему например Упрощение архитектуры: Используйте более легкие и простые модели нейросети, которые требуют меньше вычислительных ресурсов. Например, вы можете использовать сверточные сети с меньшим количеством слоев или с меньшим числом фильтров. Компрессия модели: Применение методов сжатия, таких как квантизация или обрезка весов, может уменьшить размер модели и снизить требования к памяти и вычислительной мощности. Пакетная обработка (Batch processing): Обрабатывайте данные небольшими пакетами, а не по отдельности. Это может сократить нагрузку на вычисления и увеличить эффективность использования ресурсов. Использование предобученных моделей: Вместо обучения модели с нуля, вы можете использовать предобученные модели, которые уже обучены на больших наборах данных. Затем вы можете дообучить модель на вашем наборе данных, что может сократить время обучения и использование ресурсов. Использование аппаратного ускорения: Если ваш ПК поддерживает аппаратное ускорение, такое как графический процессор (GPU) или специализированный процессор (TPU), использование их может значительно ускорить работу нейросети.
@georgechernov9981
@georgechernov9981 Год назад
Привет! Подскажи пожалуйста, что это за автокомплит/т9 у тебя в терминале на 6:53?
@larchanka
@larchanka Год назад
Это tabnine
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
@@larchanka GPT4All2.4.4 не работает на винде,скачиваешь патчи 4 или7 гигов а окно с закачкой не убрать,я нажимаю мимо окна как у тебя на видео а оно не убирается
@МишаМихаил-ф7х
@МишаМихаил-ф7х Год назад
На Виндовс 10 не работает. Скачалась версия и программа перезапустилась. При ее запуске она сразу выключается. В общем видно уже не работает этот сервис
@МишаМихаил-ф7х
@МишаМихаил-ф7х Год назад
Именно запускается и сразу вылетает после того как установится одна из версий офлайн чата. И кеш чистил и переставлял программу все равно не запускается
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
у меня тоже,не убирается окно с закачками
@МишаМихаил-ф7х
@МишаМихаил-ф7х Год назад
@@marvinheemeyer7027 окно убирается все ок. Просто когда ща пускаешь приложение оно появляется и закрывается вот и вся его работа. Не работает в общем
@syberyHeart
@syberyHeart Год назад
привет а что думаешь про yandex gpt
@larchanka
@larchanka Год назад
Планирую познакомится поближе. Надеюсь хорошая модель
@KlinovAS
@KlinovAS 9 месяцев назад
20 лет нужно было, с однослойной нейронки начать высчитывать ошибки многослойной сети и это стало революцией. Лично я считаю, что произойдет еще одна революция, когда аналоговая сеть будет превозойдена бинарной нейросетью, которая в много раз быстрее. Непонятно сколько лет на это нужно.
@artyombevsubdiv
@artyombevsubdiv Год назад
Как по мне, так из бесплатных пока vicuna хоть что-то может. Но 13B уж больно урезанный вариант параметров, GPT-3 имел в 13 раз больше, поэтому если её будут развивать в дальнейшем, то было бы интересно глянуть, насколько она дотягивает до нынешнего ChatGPT.
@atommax_1676
@atommax_1676 Год назад
Ну, есть опенсорс модели типо BLOOM 175B и OPT 175B, но такое ни один обычный комп не потянет(там надо минимум 250гб видео памяти вроде
@artyombevsubdiv
@artyombevsubdiv Год назад
@@atommax_1676 есть версии GGML, они все, вплоть до 65B запускаются на малом количестве ОЗУ, другое дело, что если процессор слабый, то ждать придётся очень долго, довольствоваться парочкой букв в минуту.
@atommax_1676
@atommax_1676 Год назад
@@artyombevsubdiv интересно. Спасибо за информацию
@artyombevsubdiv
@artyombevsubdiv Год назад
Вообще странно, что сейчас, на huggingface, до сих пор выкладываются языковые модели с параметрами меньше, чем 13B. Ведь 7B уже не может кодить нормально, 3B тем более.
@PythonDevelopment
@PythonDevelopment Год назад
Мой тысячный лайк :D
@KlinovAS
@KlinovAS 9 месяцев назад
Спасибо. Жаль у меня не достаточно мощное железо, всего лишь 16Гб оперативки. Как доставлю еще 32Гб - попробую. Но не знаю сможет ли оно работать на встроенной AMD радеон с 3Гб оперативки видеокартой, так как рисование картинок не заработало как раз из за недостатка оперативки на видеокарте. Но все же очень интересно и познавательно
@Dymatel
@Dymatel 7 месяцев назад
А почему нельзя ее на сервак поставить? Что б комп не нагружать?
@aleksandr_anp
@aleksandr_anp Год назад
Интересна интеграция ai в чат боты сайтов, например е-коммерции. Аля онлайн консультант, но в рамках товаров конкретного сайта.
@SupplyBurn
@SupplyBurn 4 месяца назад
Альтернативы: 1) LM Studio 2) Jan 3) Faraday Gpt4All не работает на Windows 7. Перечисленные выше альтернативы - работают (предварительно требуется установить VxKex и включить его для основного exe файла программы).
@orenders
@orenders Год назад
Если Маск с его Нейрлинк засунет в голову GPT модель, то представьте как быстро станет развиваться человечество... за считаные дни решатся очень много проблем и сложностей, но конечно и создадутся новые.
@atommax_1676
@atommax_1676 Год назад
Скорее деградировать
@kusov4748
@kusov4748 Год назад
Тыкаю gtp4. И вопросы по кодингу не особо лучше обрабатывает чем гпт3.5
@Comm1ted
@Comm1ted Год назад
суть не в качестве ответов, а в количестве токенов и контексте. ГПТ4 лучше в этом
@Andrew-7324
@Andrew-7324 Год назад
Та ладно, разница как небо и земля
@bikeonoor4006
@bikeonoor4006 Год назад
Я бы сказал, что основное отличие в том, что модель GPT4 позволяет на вход в 4-5 раз больше токенов принимать. А это принципиально для нее, тк по незнакомым темам она вообще или ничего не генерирует или начинает фантазировать.
@bikeonoor4006
@bikeonoor4006 Год назад
Надо понимать, что GPT это именно языковая модель. Исключительно хорошая модель. Но далеко не экспертная система. Чтобы она выдавала на выходе что-то отличающееся от статьи обычного журналиста, ее надо обучать экспертным знаниям в конкретных областях. А для этого, например, общедоступная GPT3 не подходит, тк принимает всего 2500 токенов информации на вход. Причем в обычном тексте плотность информации очень мала. Нужно готовить текст в специальном виде.
@Andrew-7324
@Andrew-7324 Год назад
@@bikeonoor4006 да, но например моя работа не требует уникальной экспертности, как и работа большинства людей на планете
@ЖеняМирошниченко-ш9д
@ЖеняМирошниченко-ш9д 8 месяцев назад
А какая комплектация нужна для нормальной работы генеративной модели?
@oldiBerezkoo
@oldiBerezkoo 4 месяца назад
A100
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
скачал первый патч нва 4 гб и ничего не произошло,прога предлагаеи скачать ещё раз
@Andrewlone174
@Andrewlone174 8 месяцев назад
Меня тоже раздрожает что то сделанное кем то что ограничено и подчиняется настройкам разроботчика, я хочу свою нейросеть которая будет делать ВСЕ что я прошу.
@SKROMNUIALEXEY
@SKROMNUIALEXEY Год назад
Даже Сергей Шнуров занялся программированием, а ты до сих пор сомневаешься?
@ГардамиранСвами
Интересно это всё, только притворный "нет войнизм" и шнуровский "похизм немного всё портит
@_v._.s._.c_
@_v._.s._.c_ Год назад
2:36 имеется ввиду API ключ? Даже если нет, то не понимаю почему создателям бы не встроить возможность вставить именно API ключ, который, после регистрации аккаунта ChatGPT, можно получить бесплатно. Я вот в VS Code использую такую же фичу БЕСПЛАТНО. (имеется ввиду не 4 платная версия, но автор упомянул версии не только версию 4, но и 3.5)
@hikeri-one
@hikeri-one Год назад
там пробный период на аккаунт дается в виде 25$.
@eterline
@eterline Год назад
​​@@hikeri-one$ даётся, а не 25, четвертая версия мне мигом их утилизирована до того, как изменили тарификацию
@eterline
@eterline Год назад
Только что зашёл в раздел /account/usage, перед написанием комментария. 5$ черным по белому.
@_v._.s._.c_
@_v._.s._.c_ Год назад
@@hikeri-one Нет, для api от 3.5 я пользуюсь бесплатно
@hikeri-one
@hikeri-one Год назад
@@_v._.s._.c_ Api GPT 3.5 тоже платное. Посмотри тарификацию в документации.
@DmytroN
@DmytroN Год назад
А где создал то, в ютубе? Или это популярное ключевое слово для раскрутки роликов.
@farikweb
@farikweb Год назад
Теперь запускай свой поисковик-аналог Google на своем ноуте
@alexu8182
@alexu8182 Год назад
ne ustanavlivaetsya na Mac do konca, prishlos udalit
@igorminaev7017
@igorminaev7017 8 месяцев назад
Как вариант ChatAll на гхабе
@just_man_yt
@just_man_yt 4 месяца назад
мог просто LM studio скачать, а забыл для Mac его поддержка прекращена, лол
@Hackreacti
@Hackreacti Год назад
так это не СВОЯ, это скачанная
@Andrew-7324
@Andrew-7324 Год назад
Свою устанешь сам обучать
@larchanka
@larchanka Год назад
Ну так она моя личная, но на чужой модели :)
@sovenok-hacker
@sovenok-hacker Год назад
@@Andrew-7324 Я обучил, 3 часа училась
@chonme
@chonme Год назад
@@sovenok-hacker Расскажи как, плз)
@kirilaksenov6102
@kirilaksenov6102 Год назад
Хотя использование искусственного интеллекта в сфере здравоохранения выглядит многообещающе, он также способен серьёзно навредить физическому и психическому здоровью человека» (журнал BMJ Global Health, 9 мая 2023 года). Люди не могут гарантировать, что новые технические достижения будут использоваться только во благо. Даже если у людей хорошие намерения, они не всегда могут предугадать, к каким негативным последствиям приведут их действия. И Библия объясняет почему: «Есть путь, который кажется человеку правильным, но в конце этого пути - смерть» (Притчи 14:12).
@djontLong
@djontLong Год назад
А причем здесь библия ?
@VShangeev
@VShangeev 11 месяцев назад
Максимум, что она может это сказать привет в ответ. Остальное все не внятное, вместо экономии времени, получаешь затягивание решения задачи. Т.ч. чисто поиграться.
@drreg2513
@drreg2513 Год назад
Компьютер за огромную сумму денег стоит столько же как средний macbook pro
@larchanka
@larchanka Год назад
Тоже верно.
@atlant1707
@atlant1707 9 месяцев назад
Запустить то не сложно. А вот сможет ваша сетка матом ругаться?) Я вот пока не нашел решения как свою сетку тренировать.
@yuriymactavish74
@yuriymactavish74 11 месяцев назад
А есть нормальный Видос? Я бы хотел знать: какие есть платформы где я могу запустить нейросеть (типа Ламы). Как ее обучить под свои задачи?
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
Есть несколько платформ и инструментов, которые позволяют запускать и обучать нейронные сети. Вот некоторые из них: 1. TensorFlow: TensorFlow - это библиотека с открытым исходным кодом для глубокого обучения, разработанная компанией Google. Она предоставляет мощные инструменты для создания, обучения и запуска нейронных сетей на различных платформах. 2. PyTorch: PyTorch - это ещё одна популярная библиотека глубокого обучения с открытым исходным кодом. Она также предлагает широкие возможности для обучения и запуска нейронных сетей, а также простую и интуитивно понятную среду разработки. 3. Keras: Keras - это высокоуровневый интерфейс для создания и обучения нейронных сетей. Он позволяет легко создавать модели нейронных сетей и обучать их на разных платформах, включая TensorFlow и другие фреймворки глубокого обучения. 4. Microsoft Azure: Microsoft Azure предлагает облачные сервисы для разработки, обучения и развертывания нейронных сетей. Вы можете использовать их готовые инструменты и инфраструктуру для эффективного тренировки моделей и масштабируемого запуска. 5. Amazon AWS: Amazon Web Services (AWS) предоставляет множество сервисов для глубокого обучения, включая Amazon SageMaker, который упрощает обучение моделей и их масштабирование. 6. Google Cloud Platform: Google Cloud Platform (GCP) также предлагает облачные услуги для разработки и обучения нейронных сетей, такие как Google Cloud AI Platform и TPU (Tensor Processing Unit) для ускоренного выполнения глубокого обучения. Чтобы обучить нейросеть для своих задач, вам необходимо определить архитектуру модели, выбрать подходящий набор данных для обучения, настроить параметры обучения и запустить процесс обучения, используя выбранную платформу или инструмент. Каждая платформа предоставляет подробную документацию и примеры кода, которые помогут вам начать и достичь желаемых результатов. Не забудьте также, что обучение нейросети требует значительных вычислительных ресурсов, поэтому убедитесь, что ваш ПК или выбранная вами платформа имеет достаточно мощности для обучения модели. 🧠💻
@VORONOKVA
@VORONOKVA Год назад
Надо объяснить на примерах с заработанными рублями или там с восстановленным здоровьем зачем нам эти прибамбасы. Проходили мы в 2000 году массовый треп-обман, и тут он снова начинается.
@maxantonov5597
@maxantonov5597 Год назад
мне кажется, или автор не просто так издателя EvE упомянул?)
@larchanka
@larchanka Год назад
кажется )
@internetnickname8923
@internetnickname8923 Год назад
Зачем устанавливать на ноутбук фронтент оболочку на много гигов, если можно пользоваться чатом буквально в телеграмме?
@larchanka
@larchanka Год назад
Я же сказал зачем в самом начале, чтобы то что ты боту отправляешь не уходило на серверы сторонних компаний, именно поэтому Эпл и Самсунг например запретили своим работникам использовать генеративные нейросети
@internetnickname8923
@internetnickname8923 Год назад
@@larchanka Хорошо, но всё равно это не даёт гарантий, что после установки локально, что в коде нет скрытого функционала по отправки твоих запросов с клавиатуры) получается если человек ищет приватности, то этот способ тоже сомнительный)
@МишаМихаил-ф7х
@МишаМихаил-ф7х Год назад
затем что через апи в телеграмме урезан контекст что ваще не удобно и тем более в телеге не удобно этим пользоваться. У меня самого бот в телеге на этом апи и все равно это не удобно жесть. Я писал на Реакте себе оболочку, но все равно через АПИ контекст ограничен что плохо!
@hikeri-one
@hikeri-one Год назад
@@internetnickname8923 это опенсурс проект
@chonme
@chonme Год назад
@@internetnickname8923 если человек ищет приватности и не умеет рулить трафиком, то ему лучше сменить род деятельности )))
@sovenok-hacker
@sovenok-hacker Год назад
У меня на i3 работает в ~x15 раз быстрее, я тут недавно дообучил LLaMA, у меня есть своя модель.
@chonme
@chonme Год назад
Что значит "дообучил"? Как?
@sovenok-hacker
@sovenok-hacker Год назад
@@chonme Значит обучил, но не с нуля, а уже с готовой модели. Написал для этого колаб блокнотик, если интересно могу скинуть ссылочку.
@chonme
@chonme Год назад
@@sovenok-hacker Да, если не сложно. Заранее спасибо!
@SSLhash
@SSLhash 3 дня назад
@@sovenok-hacker Если не затруднит и мне можно скинуть
@Kirill_Batkovich
@Kirill_Batkovich Год назад
Тогда не понятно как сотни миллионов пользователей пользуются чат gpt и в них не тормозит.. Какая мощность при обработке у компании ?)
@masterbiz100
@masterbiz100 Год назад
Сотни миллионов не пользуются им все и одновременно. Большая часть из них - это разовые пользователи. Типа, зарегился, пару промптов ввел и все. Активных пользователей - на порядки меньше
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
охота нейросеть под себя сделай сам
@Bejfus
@Bejfus Год назад
Жаль, у железа всего 16Ггб.
@larchanka
@larchanka Год назад
На винде есть компьютер в который можно 32 или даже 64 установить. Уже даже задумался.
@Bejfus
@Bejfus Год назад
@@larchanka Да, как раз две линейки пустуют. А вообще комп староват. Уже лет 7 как юзаю. Ещё SSD терабайтник вылетел, так я сгоряча купил ноут HUAWEI, но в него уж ничего не засунуть. А вообще хотел поиграться с чатом по части инъяза. Живу в Германии и сделал на UE4 речевой тренажёр, чтобы свой немецкий продвигать. Пару лет назад уже понимал, что ИИ скоро выпорхнет и начнёт на пятки нажимать. Только у меня прожка говорит настоящими немецкими голосами. Ещё не придумали таких качественных движков, чтобы заменить человеческий голос. А генерить его облаком долго и дорого.
@Олександр-ь1щ1й
Объясните почему запрещают пользоваться chatGpt в компаниях, это же будущее
@borismor1
@borismor1 Год назад
Данные передаются третьим лицам
@vovam6565
@vovam6565 Год назад
Потому что внутренний код компании отправляется на сервера майкрософт, что не безопасно.
@Bejfus
@Bejfus Год назад
Он же сказал в конце.
@Олександр-ь1щ1й
​@@Bejfusа я только первую минуту посмотрел, ии на на ноуте для меня неинтересная тема
@Bejfus
@Bejfus Год назад
@@Олександр-ь1щ1й ясно. У меня тоже ноут. Погугли мой ник. Узнаешь мой интерес. 😇
@d4vlL
@d4vlL Год назад
llama принадлежит meta, и они сами не публиковали модель, ее слили, так что использование llama считается пиратством (речь про коммерческое использование преимущественно)
@vovam6565
@vovam6565 Год назад
Сама модель llama открытая, официально лежит на гите, а вот обученную модель слили (веса модели) незаконно. Но уже есть много обученных с нуля моделей llama которые вполне себе открытой лицензии и можно использовать, в том числе коммерчески.
@d4vlL
@d4vlL Год назад
@@vovam6565 Спасибо, полезно
@misterfox3464
@misterfox3464 10 месяцев назад
Любая маленькая модель - очень тупая. Не райтесь её быстрое. Максимум где вы с можете её использовать так это для тегких текстовых задач - не более... Сказать, посоветовать из списка чего либо и тд. Никаких деферамбов она вам не сможет создать. Для запуска по настоящему мощных моделей требуется мощное железо, которое само собой есть не у всех...
@orenders
@orenders Год назад
тупо ЛАЙК за НЕТ ВОЙНЕ
@marvinheemeyer7027
@marvinheemeyer7027 Год назад
да неройнкам
@gyfugyruu1139
@gyfugyruu1139 Год назад
Хеоны очень подешевели на али экспрес, за 25 - 30 к можно купить 20 ядер 40 потоков 128 гигов, и будет тебе счастье
@larchanka
@larchanka Год назад
Тут скорее видеокарты очень нужны.
@sovenok-hacker
@sovenok-hacker Год назад
+64 гига оперативы, и LLaMA 65B полетит даже
@Aziz108
@Aziz108 Год назад
У меня как раз 36 ядерный 2 процессорный Ксюша есть, 128 Гб памяти и карта на 24 Гб памяти. Кушает в покое 300 Вт. Похоже пробил его час, а то не использовал для программирования столько не нужно было..
@xristalrus
@xristalrus Год назад
​@@Aziz108привет, пробовал запускать текстовые нейросети на этой машине?
@Aziz108
@Aziz108 11 месяцев назад
@@xristalrus привет, пока не дошло дело еще, в планах... Пока думаю как миллионы заработать)
@ВорчатникБу
@ВорчатникБу 2 месяца назад
Ты чо, против войны чтоли? А вроде умный
@sibirin-patriot
@sibirin-patriot Месяц назад
а кто за войну? любят и уважают войны как раз скорее тупые
@Тудисюди-э7з
@Тудисюди-э7з Год назад
пхах, хороший развод, купить ключь от гпт4 что сидеть с левой программы общаясь с гпт4, смысл? я так могу сказать гпт4 написать примитивную чатпрограмму и тож пользоваться гпт4
@VRT-y3f
@VRT-y3f Год назад
Пиратим? )
@larchanka
@larchanka Год назад
Обязательно
@absurdradio
@absurdradio Год назад
ну какая-же она твоя? тот факт, что ты ее скачал, не делает ее твоей
@1382200
@1382200 5 месяцев назад
Чел, ну ты ж ничего толком не рассказал (
@romanmed9035
@romanmed9035 8 месяцев назад
запустил GPT4ALL и скачал одну из больших моделей. но там актуальность данных на конец 2021 года. можно ли как-то обновить модель локально что-то ей скормив или какую модель качать чтобы получить качественные ответы с актуальными хотя бы на конец 2023 года данными? у меня комп хоть и старый, но памяти больше 16гб. скорость ответа по одному символу.
@Pro-tk5nw
@Pro-tk5nw Год назад
Миш, как ты думаешь. Ситуация такая, раньше я сам писал код, учился на ютубе, делал небольшие пет проекты, сейчас сильно обленился и все делаю через чат gpt, он сам полностью пишет весь код, я прописываю то что мне нужно, сейчас поймал себя на мысли, что я теперь не настоящий программист, учусь как раз на аналитика и машиное обучение и подобное, можешь сказать мне я правильную мысль поймал или нет
@larchanka
@larchanka Год назад
Я что-то свое тоже так пишу. Чтобы быстрее было. Но работу сам делаю. Вообще думаю что так и должно в итоге стать. Но, как ты наверное заметил, не так просто написать сложный код даже с чатом
@Pro-tk5nw
@Pro-tk5nw Год назад
@@larchanka да, ошибки постоянно, приходится исправлять, но 90% делает он и от этого как то стыдно иногда становится внутри что ты говоришь другим, вот ты проект делаешь, крутая идея, все сам а по факту нифига, как-то самооценка сильно снизилась
@masterbiz100
@masterbiz100 Год назад
@@Pro-tk5nw Ну, по вашей логике, разрабу должно быть стыдно, что он не в Блокноте код пишет, а, например, в WebStorm с кучей плагинов, сниппетов. Так что твоя самооценка должна быть спокойна. Главное, чтобы твой код был рабочим и не глючным. А какой инструментарий ты использовал для его генерации - это дело десятое
@igorkirichenko3715
@igorkirichenko3715 Год назад
Какой компьютер необходим для комфортного запуска своей нейросети?
@vovam6565
@vovam6565 Год назад
Нужна видеокарта с озвученным количеством памяти, зависит от модели, но по моему опыту, все что меньше 30млрд параметров выдает так себе ответы, следовательно что бы получить хоть что то полезное надо от 30Гб видеопамяти (лучше около 80), что бы просто побаловаться позапускать 13млрд сеточки хватит 3090 или 4090rtx. На процессоре запускать не советую, потому что даже на самом топовом будешь получать максимум 1-2 слова в секунду (на видеокарте примерно 10-20 слов в секунду)
@locodo12
@locodo12 Год назад
Наиболее оптимально сейчас это последние 13b-4bit модели (типа vicuna) на 3060 12гб.
@sovenok-hacker
@sovenok-hacker Год назад
@@vovam6565 Зачем? Есть же GGML квантизация.
@vovam6565
@vovam6565 Год назад
@@sovenok-hacker Так я про квантованные и говорю. Условная 30B модель в 4бит квантизации требует 24Гб видеопамяти, 60B модель - 42Гб (если на CPU то 32Гб и 64Гб оперативки соответственно). Большинство моделей сейчас 7B или 13B, не идут ни в какое сравнение даже с GPT3.5 не говоря уже про GPT4. Все эти громкие слова, типо наша очередная модель достигает качества 97% от chatGPT часто умалчивают, что это на узком диапазоне задач (под которые ее конкретно дообучили) но никто не говорит, что на остальных задачах она теряет даже тот уровень который был изначально. Это при том, что они не заявляют как они превзошли GPT а говорят как они только приближаются к ней. И это я про английский язык, все эти любительские модели в 99% случаев дообучают исключительно на английском, в следствии чего изначально мультиязычная модель вроде LLAMA теряет способность адекватно общаться на любом языке кроме английского. Описанные недостатки хоть немного сглаживаются с ростом моделей, и уже от 30-60B выглядят ну хоть немного адекватней, и хотя бы заметна небольшая конкуренция с chatGPT. Поэтому я и написал такие требования к видеокарте, ну а про скорость генерации я уже писал, на видеокарте она минимум в 5-10 раз быстрее чем на процессоре, ждать по 10-15 минут на ответ такое себе удовольствие.
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
давно я в этой области мне это очень интересно эти нейросети непонятно какого года вотв общем мой подход оговорюсь я пишу коды на чистом питоне и с++ Создание начальной популяции: В начале алгоритма создается случайная популяция нейросетей. Это делается путем случайной генерации весов и архитектуры нейросетей. Каждая нейросеть в популяции представляет собой набор узлов (нейронов) и связей между ними. Оценка производительности: Для каждой нейросети в популяции вычисляется ее производительность на заданной функции приспособленности. Эта функция определяет, насколько хорошо нейросеть выполняет поставленную задачу. Например, в задаче классификации изображений функция приспособленности может оценивать точность классификации. Естественный отбор: Нейросети с лучшей производительностью (высокой оценкой функции приспособленности) имеют больше шансов выжить и передать свои гены следующему поколению. Они могут быть выбраны с использованием различных стратегий отбора, таких как пропорциональный отбор или турнирный отбор. Скрещивание и мутация: Следующий шаг - создание новой популяции путем скрещивания и мутации существующих нейросетей. Скрещивание происходит путем комбинирования генов (весов и архитектуры) из двух родительских нейросетей, чтобы создать потомка. Мутация случайным образом изменяет некоторые гены в потомке для разнообразия и исследования новых вариантов. Итерации: Шаги 2-4 повторяются в цикле несколько раз, образуя новые поколения нейросетей. В каждом поколении лучшие нейросети сохраняются, а остальные исключаются. Алгоритм продолжает выполняться до достижения заданного критерия остановки, такого как достижение определенного значения функции приспособленности или максимальное число итераций. Примеры функций для понимания этой темы: Функция приспособленности: В задаче оптимизации, где нужно найти значения переменных, максимизирующие или минимизирующие функцию, функцией приспособленности может быть сама оптимизируемая функция. Отбор: Функция отбора выбирает нейросети для скрещивания на основе их производительности. Примером может быть выбор нейросетей с наивысшими значениями функции приспособленности. Скрещивание: В функции скрещивания можно использовать различные методы комбинирования генов из родительских нейросетей. Например, можно случайным образом выбрать точку раздела и обменять части весов или архитектуры между родителями. Мутация: Функция мутации случайным образом изменяет некоторые гены в потомке. Например, можно изменить веса нейронов на небольшую случайную величину или добавить или удалить случайные связи между нейронами. Генетический алгоритм отличается тем, что позволяет нейросетям эволюционировать и адаптироваться к поставленной задаче, улучшая свою производительность в каждом поколении. Этот подход может быть особенно полезен в задачах, где нет явного решения или требуется поиск оптимальных параметров. 😊🧬
@ИгорьЩербаков-о9с
@ИгорьЩербаков-о9с 9 месяцев назад
Создание начальной популяции: import random def create_individual(length): return [random.randint(0, 1) for _ in range(length)] def create_population(size, length): return [create_individual(length) for _ in range(size)] Оценка производительности: def fitness(individual): x = decode_individual(individual) # Декодирование особи, return x**2 # Возврат значения функции приспособленности Естественный отбор (пропорциональный отбор): def selection(population, fitness): total_fitness = sum(fitness(individual) for individual in population) probabilities = [fitness(individual) / total_fitness for individual in population] return random.choices(population, probabilities) Скрещивание и мутация (одноточечное скрещивание и инверсия бита): def crossover(parent1, parent2): length = len(parent1) crossover_point = random.randint(1, length - 1) child1 = parent1[:crossover_point] + parent2[crossover_point:] child2 = parent2[:crossover_point] + parent1[crossover_point:] return child1, child2 def mutation(individual, probability): for i in range(len(individual)): if random.random() < probability: individual[i] = 1 - individual[i] # Инверсия бита Приведенный выше код демонстрирует основные шаги генетического алгоритма, но он может быть дополнен дополнительными функциями, такими как элитизм (сохранение лучших особей), методы отбора и параметры конфигурации."""""""""""приведенный код является упрощенным и не является полной реализацией генетического алгоритма. Он лишь демонстрирует основные концепции и шаги алгоритма. Реальная реализация может варьироваться в зависимости от конкретной задачи и требований. 😊🧬""""""""""
Далее
А вы играли в school boy runaway?
00:30
Просмотров 149 тыс.
Делаю нейросеть с нуля
17:17
Просмотров 1,4 млн
А вы играли в school boy runaway?
00:30
Просмотров 149 тыс.