Huihui.ai — это платформа и коллекция открытых языковых моделей (часто создаваемых на базе популярных архитектур вроде Qwen или DeepSeek, но оптимизированных или «облитеэрированных» (abliterated), то есть освобожденных от избытельных цензурных ограничений). Запустить такую нейросеть можно локально на своем компьютере.
Ниже представлена подробная инструкция о том, как установить и запустить модели от huihui.ai двумя самыми простыми и популярными способами: через Ollama (для работы через командную строку) или LM Studio (с удобным графическим интерфейсом).
Способ 1: Установка через Ollama (Быстро и легко)
Ollama — это популярный инструмент для запуска языковых моделей локально, который отлично подходит для экономии ресурсов и работы через терминал.
Шаг 1. Установка Ollama
- Перейдите на официальный сайт Ollama (
ollama.com). - Скачайте установщик для вашей операционной системы (Windows, macOS или Linux).
- Запустите скачанный файл и следуйте стандартным инструкциям на экране.
Шаг 2. Запуск модели
После завершения установки откройте командную строку (на Windows это может быть cmd или PowerShell, на macOS/Linux — стандартное приложение Terminal).
Введите команду для загрузки и запуска нужной сборки от huihui-ai (например, популярные варианты на базе DeepSeek или Qwen):
ollama run huihui_ai/deepseek-r1-abliterated:8b
(Примечание: Название тега или модели может меняться в зависимости от того, какую именно версию вы хотите использовать — уточняйте актуальные названия в репозиториях сообщества или на Hugging Face).
Ollama автоматически скачает необходимые веса модели в формате GGUF и сразу откроет интерактивный чат прямо в окне терминала.
Способ 2: Установка через LM Studio (С графическим интерфейсом)
Если вы не хотите пользоваться командной строкой и предпочитаете привычный интерфейс в стиле ChatGPT с красивыми окошками, лучше всего использовать LM Studio.
Шаг 1. Установка LM Studio
- Зайдите на официальный сайт LM Studio (
lmstudio.ai). - Скачайте и установите программу для вашей ОС (поддерживаются Windows, macOS и Linux).
Шаг 2. Поиск и скачивание модели Huihui-AI
- Запустите установленную программу LM Studio.
- В верхней строке поиска введите huihui-ai или название конкретной модели, которую вы хотите найти (платформа активно публикует свои веса на Hugging Face, откуда LM Studio умеет напрямую скачивать файлы).
- Выберите подходящий под характеристики вашего компьютера объем модели (например, версии на 7B, 8B или более тяжелые, если у вас мощная видеокарта с большим объемом VRAM).
- Нажмите кнопку Download (Скачать).
Шаг 3. Запуск чата
- После завершения загрузки перейдите во вкладку чата (иконка значка сообщения на панели слева).
- В верхней части экрана выберите скачанную модель из выпадающего списка.
- Нажмите кнопку Load (Загрузить). Как только модель загрузится в память, вы сможете начать полноценный диалог в привычном оконном интерфейсе.
Что нужно учитывать?
- Системные требования: Локальный запуск нейросетей требует мощного железа. Желательно иметь дискретную видеокарту NVIDIA (с поддержкой CUDA) или современный Mac с процессором Apple Silicon (M1/M2/M3/M4) и достаточным количеством оперативной/объединенной памяти (от 16 ГБ и выше для небольших моделей).
- Свободное место на диске: Файлы весов моделей могут весить от нескольких гигабайт до нескольких десятков гигабайт, поэтому заранее освободите место на накопителе.
Leave a Reply