File size: 7,534 Bytes
e45263b
 
 
f366b18
 
 
 
 
 
 
 
 
 
 
c7fffa2
 
f366b18
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
---
license: mit
---

Модель обучена на миксе инструкционных датасетов, и способна отвечать на вопросы, выполнять несложные инструкции<br>
Из обучающей выборки были исключены арифметические задачи, поэтому считать модель не умеет

Для запуска можно использовать следующий код:

```python:
import torch
from transformers import AutoTokenizer, AutoModelForSeq2SeqLM
from transformers import GenerationConfig

tokenizer = AutoTokenizer.from_pretrained("SiberiaSoft/SiberianFredT5-instructor")
model = AutoModelForSeq2SeqLM.from_pretrained("SiberiaSoft/SiberianFredT5-instructor")
model.eval()

def generate(prompt):
  data = tokenizer('<SC6>' + prompt + '\nОтвет: <extra_id_0>', return_tensors="pt")
  data = {k: v.to(model.device) for k, v in data.items()}
  output_ids = model.generate(
      **data,  do_sample=True, temperature=0.2, max_new_tokens=512, top_p=0.95, top_k=5, repetition_penalty=1.03, no_repeat_ngram_size=2
  )[0]
  out = tokenizer.decode(output_ids.tolist())
  out = out.replace("<s>","").replace("</s>","")
  return out

while 1:
  print(generate(input("Введите промт и фразу: ")))
  print("====================")
```

<b>Можно просто задавать ей разные вопросы:</b><br>
<i>Что такое циновка?<br>
Как сделать десерт из клубники?</i>

<b>Промт, который выделяет из фразы ключевые слова и сразу ставит их в нормальную форму:</b><br>
<i>Выдели ключевые слова: Мы праздновали день рождения друга и подарили ему подарок</i>

<b>Промт для выделения главной мысли в предложении (суммаризация предложения):</b><br>
<i>Выдели главные мысли в предложении: Чтение книг важно не только для развития нашего интеллекта, но и для расширения кругозора и понимания различных культур и мировоззрений.</i>

<b>Промт для определения тематики предложения:</b><br>
<i>Определи тематику: В наше время все больше и больше людей занимаются йогой.</i>

<b>Промты для придумывания вопросов:</b><br>
<i>Придумай вопросы на тему Политика<br>
Придумай 5 вопросов к собеседнику на тему детство<br>
Придумай другие варианты вопроса: Кем ты работаешь?<br>
Придумай вопросы к этому тексту: "К особым префектурам можно отнести Токио, Киото, Осаку и Хоккайдо. В период Эдо (1603—1867), сёгунат установил 9 городских районов, которыми управляли чиновники из центра (奉行支配地), и 302 районных города, которыми управляли городские чиновники (郡代支配地). С наступлением эпохи Мэйдзи 9 городских центров были превращены в округа фу, а 302 районных города — в префектуры кэн. В 1871 г., после административной реформы, в Японии было установлено 3 городских префектур фу — Токио, Киото и Осака. В 1943 г. городская префектура Токио была переименована в столицу то (хотя закона о столице утверждено не было).",<br></i>

<b>Промт для предсказания последствий действия:</b><br>
<i>Что произойдет дальше: Я выиграл в лотерею</i>

<b>Промт для объяснения чего-то простыми словами:</b><br>
<i>Объясни ребенку тему виды отдыха.</i>

<b>Промт для решения проблем:</b><br>
<i>Реши проблему: Борьба с низкой самооценкой.</i>

<b>Промт для раскрытия анафоры по предыдущей фразе</b><br>
<i>Раскрой анафору последней фразы в диалоге: "футбол ты любишь?" , "нет",</i>

<b>Промт для ответа на вопрос по тексту:</b><br>
<i>Текст:\nПервые благотворительные фонды возникли в начале XX в. в США, благодаря усилиям известного промышленника и филантропа Джона Рокфеллера. Именно Дж. Рокфеллер выдвинул идею поставить благотворительность на регулярную основу, предложив создать трест благотворительности [6]. Первой организацией такого типа стал Совет по всеобщему образованию (1902 г.), позднее вошедший в состав фонда Рокфеллера. Примеру Рокфеллера последовали и другие крупные предприниматели США: Эндрю Карнеги, Билл Гейтс и другие.\n\nИсходя из текста выше, 'где возникли благотворительные фонды'\n</i>

<b>Промт для продолжения диалога с контекстом:</b><br>
<i>Я парень, программист. Увлекаюсь эзотерикой и конспирологией. Пишу фантастику. Люблю природу. Недавно, у меня был следующий диалог:\nТы: Ты знаешь, фантастика меня всегда привлекала. Что-нибудь интересное можешь порекомендовать?\nЯ: Если тебе нравится научная фантастика, то обязательно прочитай Война миров Герберта Уэллса. Очень увлекательная история о захвате Земли инопланетными существами.\nТы: А ты не считаешь, что на самом деле существует возможность контакта с другими цивилизациями во Вселенной?\nЯ: Мы точно не знаем, что на самом деле находится в космосе и какие существа могут обитать где-то далеко от нашей планеты. Многие теории конспирологов и эзотериков говорят о существовании инопланетян и их влиянии на нашу жизнь.\nТы: А есть ли у тебя какие-то любимые книги или фильмы в жанре фантастики?\nЯ:</i>