Итоговый тест по курсу — Искусственный интеллект

Восемнадцать вопросов по всем урокам курса — от того, что такое нейросеть, до моделей на своём компьютере, машинного обучения на Python и вопросов этики. После ответа появится пояснение: если ошиблись, оно подскажет, что перечитать.

1. Что такое машинное обучение? Обучение людей работе с компьютеромСпособ, при котором правила не пишут вручную, а находят по примерамПрограмма, которая учит машины ездить без водителя

Верный ответ: Способ, при котором правила не пишут вручную, а находят по примерам. Человек даёт примеры с ответами, а правило — модель — подбирается само. Беспилотные машины — лишь одно из применений.

2. Что подбирается при обучении нейросети? Веса связей между нейронамиЧисло строк в программеТактовая частота видеокарты

Верный ответ: Веса связей между нейронами. Устройство сети задаётся заранее, а обучение сдвигает веса так, чтобы ошибок на примерах стало меньше.

3. Как языковая модель составляет ответ? Находит готовый ответ в базе вопросов и ответовПо кусочку: каждый раз выбирает вероятное продолжение и дописывает егоКопирует текст с первого найденного сайта

Верный ответ: По кусочку: каждый раз выбирает вероятное продолжение и дописывает его. Модель порождает текст токен за токеном. Поэтому ответ может быть правдоподобным, но неверным.

4. Что такое токен? Пароль для входа в чат-ботКусочек текста, которым оперирует модель: слово, часть слова или знакОдна строка ответа

Верный ответ: Кусочек текста, которым оперирует модель: слово, часть слова или знак. Модель читает и пишет токенами. В них считают длину контекста, лимиты и цену API.

5. Модель уверенно назвала статью закона, которой не существует. Как это называется? ПереобучениеПредвзятостьГаллюцинация

Верный ответ: Галлюцинация. Галлюцинация — правдоподобная выдумка. Предвзятость — перекос из-за данных, переобучение — запоминание примеров вместо закономерности.

6. Почему переспрашивание «Вы уверены?» — плохая проверка ответа? Модель подстраивается под собеседника и может заменить верный ответ невернымМодель на такой вопрос не отвечаетМодель всегда признаётся в ошибке

Верный ответ: Модель подстраивается под собеседника и может заменить верный ответ неверным. Проверяют не модель, а факт: по первоисточнику или независимым источникам.

7. Какой запрос даст более полезный ответ? «Расскажите про Великую Отечественную войну»«Составьте план доклада на 5 минут для 9 класса об обороне Брестской крепости, 5 пунктов»«Расскажите всё, что знаете, подробно»

Верный ответ: «Составьте план доклада на 5 минут для 9 класса об обороне Брестской крепости, 5 пунктов». В хорошем запросе есть задача, контекст (кому и зачем), формат и объём. Модели не приходится угадывать.

8. Как уменьшить выдумки при ответе на вопрос по инструкции? Попросить модель «не врать»Вставить текст инструкции и попросить отвечать только по немуЗадать вопрос несколько раз подряд

Верный ответ: Вставить текст инструкции и попросить отвечать только по нему. С материалом перед глазами модель сопоставляет текст, а не вспоминает. Разрешение ответить «в тексте этого нет» снимает соблазн выдумать.

9. Что из этого можно без опаски отправить в чат-бот в интернете? Фото паспорта, чтобы заполнить анкетуПереписку с клиентами компанииТекст, в котором имена и номера заменены на «Клиент А» и «[телефон]»Код из SMS, чтобы модель объяснила, что это

Верный ответ: Текст, в котором имена и номера заменены на «Клиент А» и «[телефон]». Обезличенный текст не раскрывает людей. Документы, чужие данные и коды из SMS уходят на серверы сервиса, и вернуть их нельзя.

10. Ученик попросил модель написать реферат и сдал его как свой. Что здесь не так? Ничего: модель — просто инструментРабота должна быть самостоятельной, а факты и источники в реферате не провереныТолько то, что реферат получился слишком длинным

Верный ответ: Работа должна быть самостоятельной, а факты и источники в реферате не проверены. Сгенерированный текст под своим именем обычно нарушает правила учёбы. К тому же модель часто выдумывает источники.

11. Почему генератор картинок по одному запросу каждый раз рисует разное? Он ищет картинки в интернетеГенерация начинается со случайного шума, и он каждый раз другойОн не запоминает запрос

Верный ответ: Генерация начинается со случайного шума, и он каждый раз другой. Диффузионная модель шаг за шагом очищает начальный шум. Тот же seed и те же настройки дают ту же картинку.

12. Позвонил «начальник» знакомым голосом и просит срочно перевести деньги. Что сделать? Перевести: голос же егоПоложить трубку и перезвонить ему по известному номеруПерезвонить по номеру, который он продиктовал

Верный ответ: Положить трубку и перезвонить ему по известному номеру. Голос подделывают по короткой записи. Обратный звонок по своему номеру проверяет, кто звонил; номер от звонящего проверкой не является.

13. Что означает 14B в названии языковой модели? Файл модели весит 14 ГБВ модели около 14 миллиардов параметровМодель поддерживает 14 языков

Верный ответ: В модели около 14 миллиардов параметров. B — billion, миллиард параметров. Файл при сжатии до 4 бит займёт примерно 7,5–9 ГБ.

14. Модель в Ollama работает очень медленно, а ollama ps показывает часть на CPU. Почему? Модель не поместилась в видеопамять целикомНет подключения к интернетуВидеокарта перегрелась и выключилась

Верный ответ: Модель не поместилась в видеопамять целиком. Не поместившаяся часть модели работает в оперативной памяти на процессоре. Помогает модель меньше или сильнее сжатая.

15. Почему не стоит открывать порт Ollama 11434 в интернет? Модели перестанут скачиватьсяУ службы нет пароля, и пользоваться ею сможет кто угодноOllama работает только без интернета

Верный ответ: У службы нет пароля, и пользоваться ею сможет кто угодно. Служба не проверяет, кто к ней подключился. Без нужды она доступна только с этого же компьютера — так и оставьте.

16. Зачем данные делят на обучающую и проверочную выборки? Чтобы обучение шло быстрееЧтобы проверить модель на примерах, которых она не виделаЧтобы занять меньше памяти

Верный ответ: Чтобы проверить модель на примерах, которых она не видела. На обучающих примерах модель может просто помнить ответы. Только новые данные показывают, умеет ли она обобщать.

17. Модель угадывает 99 % обучающих примеров и 60 % проверочных. Что с ней? Всё хорошо: 99 % — отличный результатПереобучение: модель запомнила примеры вместо закономерностиНедообучение: модель слишком простая

Верный ответ: Переобучение: модель запомнила примеры вместо закономерности. Высокая точность на обучении и низкая на проверке — главный признак переобучения. При недообучении плохо и там и там.

18. Кто отвечает за решение, принятое по совету нейросети? Компания, которая сделала модельЧеловек, который принял решениеНикто

Верный ответ: Человек, который принял решение. Модель — инструмент. Ответственность за решение и его последствия остаётся у человека.