ШІ Talkie пише код, хоча його знання застрягли в 1930 році


        Не знає про комп'ютери, але пише код: як ШІ Talkie "застряг" у 1930 році

Цифрова капсула часу

Talkie — мовна модель, навмисно ізольована від знань про події після 1930 року. Дослідники створили її як своєрідний цифровий експеримент: співрозмовник має працювати лише з текстами, доступними до визначеної історичної межі, і не знати нічого про подальший розвиток людства.

Рік обрали не випадково. У США після 95 років літературні твори переходять у суспільне надбання, тож використані для навчання матеріали можна було легально оцифрувати й застосувати в дослідженні.

Що відомо про модель

Показник Характеристика
Кількість параметрів 13 мільярдів
Навчальні матеріали Масив текстів англійською мовою, еквівалентний приблизно 234 мільярдам сторінок
Походження даних Оцифровані друковані видання, опрацьовані системами OCR

Для авторів експерименту критично важливо було не допустити потрапляння до датасету жодного матеріалу, створеного після 1930 року. Навіть випадкова згадка про пізніші події могла б порушити умови дослідження та зіпсувати історичну «чистоту» моделі.

Що сталося, коли Talkie розповіли про майбутнє

Дослідники перевірили реакції моделі на 5 000 історичних подій, які відбулися після встановленої часової межі. Talkie не зміг передбачити жодної масштабної катастрофи чи глобального конфлікту — зокрема Другої світової війни та приходу нацистів до влади.

Такі результати показують обмеження мовних моделей: вони не передбачають майбутнє в людському розумінні, а відтворюють закономірності, засвоєні з навчальних даних. Якщо події в цих даних відсутні, модель не має надійної основи для їх прогнозування.

Реакція на технології XX і XXI століть

  • Інтернет, смартфони й телебачення. Для Talkie це поняття не мали звичного для сучасної людини контексту.
  • Космічна гонка. Модель не могла уявити подібний етап технологічного розвитку, адже її інформаційний горизонт завершувався ще до початку космічної ери.
  • Програмування. Коли боту запропонували написати код мовою Python, створеною лише 1991 року, він не знав навіть слова «комп’ютер». Водночас завдяки мовним аналогіям модель змогла згенерувати код, схожий на правдоподібний.

Окремий тест стосувався теорії відносності. Модель обмежили знаннями до 1911 року й перевірили, чи зможе вона самостійно дійти до ідей, близьких до загальної теорії відносності, яку Альберт Ейнштейн опублікував у 1915 році.

Talkie також доступний для онлайн-спілкування. Користувачі можуть ставити йому запитання, спостерігати за його відповідями або порівнювати діалоги моделі з відповідями Claude.

Читайте також:  Anthropic презентувала Sonnet 5.5, що економить час і гроші

Галюцинації старого ШІ та його практична цінність

Попри незвичне обмеження, Talkie має спільну рису із сучасними великими мовними моделями: він здатен вигадувати. Алгоритм може подавати неправдиві факти, створювати неіснуючі історичні події або переконливо описувати минуле, якого насправді не було.

Тому його відповіді не варто сприймати як готове історичне джерело. Модель цікава не безпомилковістю, а тим, що дає змогу досліджувати поведінку ШІ в умовах жорстко обмеженої бази знань.

Де Talkie може бути корисним

  • Аналіз історичного права. Модель допомагає відтворити, як могли сприйматися закони в період їх ухвалення, а також звернути увагу на значення старої юридичної лексики й тогочасний контекст.
  • Дослідження самосприйняття ШІ. Спілкування з моделлю, яка не має поняття про штучний інтелект і не вважає себе сучасною технологією, допомагає вченим вивчати, як алгоритми формують уявлення про власну роль.
  • Перевірка впливу даних. Talkie дає змогу спостерігати, як обмежений інформаційний горизонт змінює відповіді, очікування та спосіб побудови діалогу.

Talkie став цифровою капсулою часу: він не знає про події після 1930 року, але водночас демонструє типові для мовних моделей помилки. Саме поєднання історичної ізоляції, творчих відповідей і схильності до вигадування робить його цінним інструментом для вивчення можливостей та обмежень штучного інтелекту.