• Астрономы обнаружили потенциально обитаемую планету «недалеко» от Земли (2 фото + видео)

    Астрономы обнаружили новую экзопланету HD 20794 d, классифицированную как суперземля и расположенную в 19,6 светового года от нас. Планета находится в обитаемой зоне своей звезды, что предполагает возможность наличия жидкой воды на её поверхности.
    Читать дальше
  • Samsung Galaxy S25 Ultra и iPhone 16 Pro Max сравнили по скорости работы (видео)

    YouTube-блогер Ник Акерман провёл сравнение скорости работы нового Samsung Galaxy S25 Ultra и Apple iPhone 16 Pro Max. Он проверил, как быстро смартфоны справляются с решением одних и тех же задач.
    Читать дальше
  • NASA обнаружило «элементы жизни» в образцах астероида Бенну (2 фото)

    Учёные NASA проанализировали образцы, собранные с астероида Бенну в ходе миссии OSIRIS-REx, и нашли в них органические соединения, играющие важную роль в происхождении жизни. В частности, были обнаружены фундаментальные элементы, необходимые для синтеза белков и формирования ДНК.
    Читать дальше
  • GeForce RTX 5090 может потреблять до 901 Вт (2 фото)

    Портал Igor's Lab провёл глубокий анализ подсистемы питания GeForce RTX 5090, включая оценку пиковых показателей мощности новинки в пределах допусков спецификации ATX 3.1. Этот анализ может быть особенно полезен для тех, кто всё ещё использует старые блоки питания стандарта ATX v2.51 и планирует подключить GeForce RTX 5090 с использовани...
    Читать дальше
  • Блогер испытал передовую XR-гарнитуру Samsung Project Moohan на Android XR — удобнее Apple Vision Pro (2 фото + видео)

    Разработка гарнитуры расширенной реальности (XR) Project Moohan от Samsung и Google, созданной на базе программной платформы Google Android XR, близится к завершению. Об этом свидетельствует видеоролик ютубера MKBHD, который получил доступ к прототипу устройства, внешне напоминающему Apple Vision Pro. Ранее в этом месяце Samsung представи...
    Читать дальше

Энтузиасты запустили современную ИИ-модель Llama на древнем ПК с Pentium II и Windows 98

31 декабря 2024 | Просмотров: 6 993 | Новости IT

Специалисты из EXO Labs сумели запустить довольно мощную большую языковую модель (LLM) Llama на 26-летнем компьютере, работающем под управлением операционной системы Windows 98. Исследователи наглядно показали, как загружается старый ПК, оснащённый процессором Intel Pentium II с рабочей частотой 350 МГц и 128 Мбайт оперативной памяти, после чего осуществляется запуск нейросети и дальнейшее взаимодействие с ней.

Для запуска LLM специалисты EXO Labs задействовали собственный интерфейс вывода для алгоритма Llama98.c, который создан на базе движка Llama2.c, написанного на языке программирования C бывшим сотрудником OpenAI и Tesla Андреем Карпатым (Andrej Karpathy). После загрузки алгоритма его попросили создать историю о Сонном Джо. Удивительно, но ИИ-модель действительно работает даже на таком древнем ПК, причём история пишется с хорошей скоростью.

Загадочная организация EXO Labs, сформированная исследователями и инженерами из Оксфордского университета, вышла из тени в сентябре этого года. Согласно имеющимся данным, она выступает за открытость и доступность технологий на базе искусственного интеллекта. Представители организации считают, что передовые ИИ-технологии не должны находиться в руках горстки корпораций, как это происходят сейчас. В дальнейшем они рассчитывают «построить открытую инфраструктуру для обучения передовых ИИ-моделей, что позволит любому человеку запускать их где угодно». Демонстрация возможности запуска LLM на древнем ПК, по их мнению, доказывает то, что ИИ-алгоритмы могут работать практически на любых устройствах.

В своём блоге энтузиасты рассказали, что для реализации поставленной задачи на eBay был приобретён старый ПК с Windows 98. Затем, подключив устройство в сеть с помощью разъёма Ethernet, они через FTP сумели передать в память устройства нужные данные. Вероятно, компиляция современного кода для Windows 98 оказалась более сложной задачей, решить которую помогла опубликованная на GitHub работа Андрея Карпатого. В конечном счёте удалось добиться скорости генерации текста в 35,9 токенов в секунду при использовании LLM размером 260K с архитектурой Llama, что весьма неплохо, учитывая скромные вычислительные возможности устройства.


Комментарии: 0

В Вашем браузере отключен JavaScript. Для корректной работы сайта настоятельно рекомендуется его включить.