Професор Уортона підкреслює мовну модель епохи Вікторії, навчану на 28 000 текстах XIX століття

Заголовок

Професор Уортонського університету ділиться мовною моделлю вікторіанської епохи, цікавиться іншими історичними періодами

Резюме

Ітан Моллік, професор Уортону, який часто пише про ШІ, твітнув про “Містера Балакуна” — мовну модель, навчена з нуля на основі понад 28,000 текстів британської вікторіанської епохи з 1837 по 1899 рік. Модель з 340 мільйонами параметрів, розміщена на Hugging Face, намагається імітувати бесіду 19 століття без жодних сучасних навчальних даних. Тріп Венчерелла створив її, використовуючи nanochat для навчання та контрольного доопрацювання. Запитання Молліка: чи може цей підхід спрацювати для Ренесансу чи Просвітництва, якщо існує достатньо оцифрованих текстів?

Аналіз

Навчання лише на текстах Британської бібліотеки означає, що Містер Балакун уникає сучасних упереджень, але успадковує вікторіанські. Коментарі з Reddit і GitHub, які я зібрав, демонструють змішану реакцію — користувачі вважають це розважальним для занурення в епоху, але зазначають, що модель впевнено робить помилки, такі як неправильне приписування авторів або вказування невірних часів подорожі. Один коментатор назвав відповіді “дивними”, але чарівними.

Проект вписується в ширшу тенденцію малих, спеціалізованих моделей з відкритим кодом, які займають ніші, які великі власницькі системи не обслуговують добре. Модель, яка дійсно звучить вікторіанською, має очевидні застосування в освіті та творчому письмі, навіть якщо їй не можна довіряти з точки зору фактів.

Інтерес Молліка зрозумілий, враховуючи його акцент на практичному впровадженні ШІ. Те, чи з’являться подібні проекти для інших епох, залежить від знаходження достатньої кількості оцифрованих текстів з суспільного домену — реальний обмеження. Бета-статус моделі та критика з боку спільноти вказують на те, що ще є над чим працювати для забезпечення надійності.

Оцінка впливу

• Значущість: Середня
• Категорії: Дослідження ШІ, Відкритий код, Технічний аналіз