OpenAI відкритий код фільтра конфіденційності, який може автоматично виявляти та приховувати приватну інформацію у тексті на локальному рівні

ME Новини повідомляють, 23 квітня (UTC+8), згідно з моніторингом Beating, OpenAI випустила під ліцензією Apache 2.0 відкритий код Privacy Filter — локальну модель для видалення конфіденційної інформації з тексту. Користувачі вводять текст у модель, яка автоматично розпізнає в ньому 8 типів особистої ідентифікаційної інформації (PII): імена, електронні пошти, телефони, адреси, акаунти, URL, дати та ключі, і позначає або приховує їх. Весь процес виконується локально, дані не потрібно надсилати в хмару. Модель має 1,5 мільярда параметрів, але завдяки розрідженій архітектурі з мікс-експертами, під час кожного запиту активується лише 50 мільйонів параметрів, тому її можна запускати на ноутбуках або навіть у браузері. Вікно контексту — 128 тисяч токенів, один прямий прохід достатній для позначення всієї приватної інформації. Користувачі можуть налаштовувати баланс між точністю та повертальністю за допомогою попередньо встановлених точок управління або донавчати модель на власних даних для адаптації до конкретних сценаріїв. Модель переважно англомовна, її багатомовні можливості обмежені. (Джерело: BlockBeats)