• Добро пожаловать на сайт - wlux.net!

    FAQ по форуму

    1. Все сообщения до группы местный проходят модерацию от 1 минуты до 24 часа

    2. Сообщения учитываються в следующих разделах: Читать

    3.Что-бы скачать вложение нужно 2 сообщения.

    4.Личные переписки работают только с Администрацией форума

    5. Запрещено: Просить скрытый текст , спам, реклама, скам, ддос, кардинг и другая чернуха, нарушать любые законы РФ/СНГ = бан аккаунта

    6. Внимание! Мы не удаляем аккаунты с форума! Будьте внимательны ДО регистрации! Как удалить аккаунт на форуме?!

    5.Не понимаю, как и что тут работает у вас?!Как создавать темы, писать сообщения, как получать реакции. Почему не засчитывает сообщения. Все ответы здесь

This is a mobile optimized page that loads fast, if you want to load the real page, click this text.

Гайд Как запустить на своём пк chatgpt или использование LLM с помощью ollama.

Оффлайн

sunilia 

Проверенный
Местный
LV
3
 
14.09.2024
78
5
18
Награды
5

Репутация:

  • Автор темы
  • #1
Всем привет!

Я хотел бы поделиться подробным руководством по установке и использованию Ollama на Linux
Ollama — это инструмент, который позволяет вам извлекать различные языковые модели и запускать их прямо на вашем компьютере.

Что такое Ollama?
Ollama — это инструмент с открытым исходным кодом, который делает работу с большими языковыми моделями очень простой.
Подготовим необходимые либы. Проверим, что оллама запускается без ошибок.
Bash:
sudo apt update && sudo apt upgrade
sudo apt install python3 python3-pip git

git clone https://github.com/ollama/ollama.git
cd ollama

pip install .

ollama --version


Далее необходимо скачать модель, например:
  • GPT-3 (OpenAI)
  • LLaMA (Meta AI)
  • Mistral (Hugging Face)
Пример:
Bash:
ollama pull gpt-3

Остальные модели можете глянуть на официальном сайте ollama.com

Загружать нужно только один раз.

Далее уже можно запускать либо диалог (сохраняется контекст)

Bash:
ollama run gpt-3

Либо использовать единичный запрос (контекст не сохраняется)
Bash:
ollama run gpt-3 "Что такое квантовая физика?"
Чтобы выйти используйте:

Если появляются ошибки/вопросы - пишите, разберемся



пы. сы. Единственная просьба - не пишите сообщение с содержанием "ничего не работает", если хотите помощи
Опишите, что пошло не так, какая ошибка, ну и скрины можете прицепить

Всем удачных познаний
 
S Оффлайн

slowtema

Участник
LV
0
 
16.09.2024
17
0
7
Награды
1
32

Репутация:

GPT разве в открытом доступе? llama надо попробовать, говорят вещь.
 
L Оффлайн

Loraks_1

Участник
LV
2
 
01.06.2024
4
0
15
Награды
2
21

Репутация:

  • Заблокирован
  • #5
Обратите внимание, если вы хотите заключить сделку с этим пользователем, он заблокирован.
спасибо что помогли, лайк
 
D Оффлайн

danik2225754

Местный
Участник
LV
2
 
30.09.2024
56
0
15
Награды
3
24

Репутация:

Почему он такой сложный
 
S Оффлайн

sergeevnikita

Участник
LV
0
 
04.10.2024
5
0
6
25

Репутация:

А можно его в python пакетом интегрировать? Проект с языковой моделью делаю, а загрузка и подключение локальной модели достаточно трудоемко.
 
Оффлайн

sunilia 

Проверенный
Местный
LV
3
 
14.09.2024
78
5
18
Награды
5

Репутация:


А какой в этом будет глубокий смысл? Отдельно в докере запустили и всё.
 
C Оффлайн

chaffi

Участник
LV
3
 
25.05.2023
2
0
23
Награды
3
23

Репутация:

Большое спасибо, крайне полезная информация.
 
N Оффлайн

nba

Участник
LV
2
 
02.08.2024
30
0
20
Награды
3
22

Репутация:

О , спасибо большое , статья хорошая
 
T Оффлайн

tri_nim

Участник
LV
0
 
07.10.2024
3
0
6
30

Репутация:

Статья отличная, спасибо лайк
 
M Оффлайн

Minoru

Участник
LV
3
 
09.01.2023
16
0
25
Награды
3
21

Репутация:

Спустя некоторое время разобрался, спасибо
 
M Оффлайн

Morrison1

Участник
LV
2
 
09.10.2024
6
0
9
Награды
2
24

Репутация:

проверил, все работает. спасибо
 
S Оффлайн

salatusss

Участник
LV
0
 
09.10.2024
2
0
6
24

Репутация:

спасибо, нереально выручил щас
 
B Оффлайн

bruhbro

Участник
LV
2
 
06.08.2024
25
0
20
Награды
4
21

Репутация:

все работает, спасибо автору
 
F Оффлайн

Facece777

Местный
Участник
LV
2
 
20.10.2024
50
0
15
Награды
3
34

Репутация:

А у него есть какие либо ограничения в плане цензуры?
 
R Оффлайн

rapidrabbit

Участник
LV
4
 
26.08.2023
4
0
24
Награды
4
25

Репутация:

а насколько мощная пекарня нужна?
 
J Оффлайн

joomjf

Участник
LV
0
 
27.10.2024
20
0
7
Награды
1
31

Репутация:

Спасибо, но почему она такая сложная, по мне винда 10 топ
 
T Оффлайн

thekreperyelloww

Местный
Участник
LV
2
 
20.11.2024
39
0
12
Награды
2
24

Репутация:

спасибо,помогли, огромный лайк вам
 

Поиск по форуму

Похожие темы:

Данный сайт использует cookie. Вы должны принять их для продолжения использования. Узнать больше....