NeoLens в роботі з модулями «Шабля» для НРК Колаж зі сторінки сервісу у LinkedIn (переклад з англійською Gemini) Поширити в соцмережах:
Розвиток технологій у бойових діях завжди йшов у крок з прогресом. Сьогодні разом зі збільшенням ролі дронів на полі бою не проходять повз і технологія штучного інтелекту.
В Україні один з напрямів його впровадження це допомога у технічному обслуговуванні техніки та озброєння за допомогою додатку NeoLens. Окрім цього він вже має й інші можливості. Доступ для українських військових безкоштовний за посиланням https://ukraine.neolens.ai/
Мілітарний поспілкувався з його засновниками, які розповіли про ШІ-асистента більш детально.
Що спонукало вас працювати в компанії та як розпочалася ця розробка?
Остап Коркуна (О.К.): Я один із засновників NeoLens. Ми починали вдвох із Джеймсом Ліо, з яким познайомилися у Стенфорді, коли я навчався там у бізнес-школі минулого року.
Джеймс — колишній американський військовий. У його кар’єрі було чимало досвіду з різною технікою: зокрема, він служив у в одній з перших Stryker бригад в Іраку і з перших рук знав про проблеми з технікою, що ламається в складних умовах.
Коли ми познайомилися у Стенфорді, Джеймс багато думав про те, що відбувається в Україні з усією технікою, яку передала Америка та інші країни. Оскільки вона не нова й,без сумніву, ламається. Питання полягало в тому: чи є в Україні відповідна експертиза і чи є взагалі час навчати людей її ремонтувати?
Ми почали досліджувати це питання ще 2025 року під час навчання у Стенфорді — спілкувалися з українськими та американськими військовими, зокрема з тими, хто підтримував українців у центрах підтримки/супроводу в Польщі. Дуже швидко підтвердилось, що проблема існує – експертизи з ремонту саме іноземної техніки обмаль, а часу на навчання практично немає. Тоді ми й почали розробляти рішення, яке допомогло б операторам і механікам діагностувати та ремонтувати важку техніку — насамперед іноземного виробництва.
Як компанія ми офіційно стартували влітку 2025 року. Першою розробкою став асистент для Humvee. Він добре зайшов серед операторів і механіків, нас підтримали відомі фахівці в галузі логістики, що допомогло запустити продукт і рухатися далі. Потім ми додали підтримку M113, пізніше САУ M109. Нещодавно глибше занурилися в складнощі обслуговування різних роботизованих наземних комплексів і турелей: почали працювати з компанією ROBONEERS, яка їх виробляє. Також взялися за дрони, які потребують обслуговування: – бомбери та ровідувальні БПЛА вимагають певних навичок управління, експлуатації та ремонту.
Володимир Гера (В.Г.): Додам важливе. – NeoLens вирішує ще й мовний бар’єр. Всі ці мануали – це складна технічна документація . Людині з рівнем англійської Intermediate важко читати такий текст одразу, а він зовсім не малий — не 20 сторінок, а 300 і більше. Для САУ M109, наприклад, це чотири-п’ять томів по тисячі сторінок кожен. Американці до того ж дуже люблять скорочення й абревіатури – вони є на початку мануалу, але далі речення може складатися практично тільки з цих скорочень. Якщо перекласти позначення шийки колінчастого валу через Google Translate, то вийде “шийка матки”
Ви згадали, що вже маєте асистента для обслуговування виробів від ROBONEERS, розкажіть більш детально про це.
В.Г.: Щодо партнерства з ROBONEERS ми познайомилися з ними на конференції організованій Brave1 у Львові. Для них NeoLens економить купу часу на прості запити, наприклад, користувач просто не помітив кнопку або неправильно ввів дані. Питання максимально просте, відповідь за секунду, але без нашого сервісу – це телефонні дзвінки, відповідний фахівець на лінії і так далі. Штучному інтелекту можна поставити навіть не зовсім точне питання, сформульоване лише на 60% правильно і він все одно виведе на правильну відповідь. Людина може не знати технічного терміну, назвати деталь неправильно, але асистент все одно зрозуміє контекст і дасть точну відповідь.
О.К.: Ще один важливий момент– це чому ми зайнялися саме цією задачею і як бачимо майбутнє додатку. Коли ми спілкувалися з американськими військовими, ми зрозуміли, що у майбутньому кількість техніки на одного оператора зростатиме. Одному військовому потрібно буде працювати з великою кількістю дронів, роботів та інших засобів. Класичний підхід, коли солдат мав одну машину й одну зброю, відходить у минуле. Прорахувати всю цю інформацію та включити її в процес навчання – це велике навантаження на одну людину, а штучний інтелект дозволяє розв’язати це питання та прибрати асиметрію між кількістю людей та кількістю техніки з якою вони працюють.
Ви кажете «додаток», хоча демоверсія — це веб-інтерфейс. Чи існує версія під смартфони?
О.К.: Ми іноді так і називаємо, бо це веб-додаток. Всі користувачі в Україні зараз працюють із веб-версією — саме з неї ми й почали, бо розуміли, що так можемо швидше надати рішення. Просто заходиш у браузер, логінишся і одразу маєш доступ до чатбота. Встановлення окремого додатку ускладнює й уповільнює надання допомоги користувачам.
Мобільний додаток у нас завжди був, але залишався в демо-режимі, бо ми переключили фокус на додавання нової техніки та покращення досвіду у веб-версії. Зараз нею користуються 1700 людей в Україні. Мобільний додаток ми все одно випустимо найближчим часом адже він критично необхідний для офлайн-функціоналу. Це одна з ключових переваг NeoLens – рішення може працювати офлайн, але для цього потрібно встановити додаток. Його демоверсія вже є, ми просто пріоритизували і не випускали, поки вона не готова для звичайного користувача.
Додаток ШІ-асистента NeoLens для обслуговування HMMWV Фото: NeoLens 
Додаток ШІ-асистента NeoLens для обслуговування HMMWV. Фото: NeoLens
Що потрібно для доступу до повної версії? Я вивчав функціонал і бачу версію з обмеженим набором техніки.
О.К.: Я б не називав це «демо» — радше є публічна та закриті версії. У додатку реалізовано контроль доступу, де до певних асистентів та документації можуть мати доступ лише верифіковані користувачі. Коли ви реєструєтесь– одразу отримуєте повноцінний доступ до ШІ-асистента, але лише для тієї техніки, документація до якої є у відкритому доступі: Humvee, M113, “Козак”, Roshel. Також одразу доступні асистент по озброєнню та асистент по виживанню. До артилерійських установок — наприклад, M109 — або до НРК від Roboneers доступу одразу немає.
В.Г.: Доступ до НРК Roboneers можна отримати через саму компанію. Вони мають окремий спосіб реєстрації для своїх користувачів. навіть клеять на свої НРК алюмінієвий щиток із QR-кодом, який веде на додаток NeoLens.
Для САУ M109 верифікація відбувається через мене як військового, через моїх знайомих військових. За два-три рукостискання можна вийти на людину й переконатися, що вона дійсно служить у відповідному дивізіоні який озброєний цими артсистемами.
Ми також хотіли запартнеритися з «Армія+», але там зараз велике завантаження. Якби була інтеграція це знімало б багато питань і спрощувало доступ для користувачів. Американський мануал містить окреме речення, що документ доступний виключно для українських військових на території України — тому ми зобов’язані проводити верифікацію вручну, щоб не порушувати ані американське, ані українське законодавство.
ШІ-асистент навчена на мануалах. Чи може вона «навчатися» далі на основі запитів користувачів? І як ви запобігаєте «галюцинаціям»?
О.К.: Це дуже гарне питання. Ми дуже тісно попрацюватли з Ігорем Сімутіним, який є топ-спеціалістом по Humvee в Україні, якщо не в світі. Перша версія асистента базувалась виключно на американських мануалах в три рівня: рівень оператора, механіка та ремонтної бази. Та ми швидко з’ясували, що деякі речі в оригінальних документах не тільки не враховані, а й можуть бути не точними.
Щодо архітектури – інформація береться виключно з бази знань, сформованої лише з документів, які ми затвердили. Це дозволяє уникнути «галюцинацій» і коли асистент не має інформації про якусь поломку, він чесно відповідає: «Я не знаю, у мене немає цієї інформації». Тож він не вигадуватиме.
Щоб покрити прогалини, ми, окрім офіційної документації,додали в асистент усі відео, які пан Ігор опублікував на своєму каналі. Вони якраз і покрили особливості використання Humvee в українських бойових умовах, яких немає в офіційних інструкціях. Тепер асистент може відповідати на більшу кількість питань, ніж звичайний мануал. Більше того — він може обробляти не лише документи, а й відео.
В.Г.: Є чудовий приклад – один користувач навмисно запитав в гілці для “Козака”, як відремонтувати Volkswagen Passat, намагаючись «збити» асистента. Діалог дуже швидко завершився: «Я не маю інструкції по Volkswagen Passat». Система не «потонула».
О.К.: Щодо навчання на основі введених користувачами даних тут ми мусимо бути обережними: не хочемо, щоб у систему потрапила неправильна інформація ні випадково, ні навмисно. Ми можемо аналізувати взаємодії з додатком для покращення якості відповідей, але навчання на некоректних даних є неприпустимим.
Чи плануєте ви розширяти партнерства з виробниками роботизованих систем та БПЛА?
О.К.: Ми спілкуємося з більшістю основних виробників дронів і НРК. Хотілося б, щоб для військовослужбовця існувало одне рішення для всіх задач з підтримки та ремонту. І для цього він міг зайти в NeoLens і знайти інструкції по будь-якому обладнанню,Усі виробники, з якими ми спілкувалися ті, у яких сотні або тисячі одиниць обладнання вже на передовій, підтверджують, що відповіді на питання, навчання та технічна підтримка є болючим місцем. У виробників це забирає величезний ресурс на прості запити. Ми можемо допомогти їм цей час вивільнити та сфокусуватися на виробництві.
Ми не замінимо живу підтримку на 100%, але дуже велика кількість питань не вимагає участі людини взагалі, а тим більше — інтернет-з’єднання. Наша ціль — давати відповідь за 5–10 секунд, без дзвінків і без інтернету.
В.Г.: Паралельно ми вже маємо асистент з виживання, який навчений на мануалах рейнджерів, Джеймс цим дуже пишається. А ще є асистент по озброєнню. Важливо підкреслити ще й психологічний момент – досвідченому військовому не потрібно питати, як користуватись браунінгом. Але є люди, яких щойно мобілізували, і вони соромляться ставити просте запитання через страх осуду, наприклад, про те , як зняти запобіжник ,. А асистента можна запитати “як на сповіді” – ніхто не дізнається, і він ввічливо відповість.
Що потрібно від виробника, щоб підключити його обладнання до NeoLens?
О.К.: Перш за все, потрібно звʼязатися з нами. Далі, нам буде потрібна документація, але вона може бути в різних форматах. Виробнику не обов’язково писати покрокові інструкції з кожного напрямку. Наш штучний інтелект може синтезувати їх самостійно, маючи інформацію про функціонування та будову приладу. Якщо в різних документах трапляються суперечності ШІ це побачить і подасть обидва варіанти. Відеоуроки – теж підходять. По суті, будь-який контент, який є у виробника, ми можемо опрацювати.
У майбутньому наша ціль – щоб технічної документації про виріб та принцип його роботи було достатньо для генерації будь-яких інструкцій з ремонту та діагностики. Тоді «написані вручну» інструкції стануть пережитком.
Ми бачимо місію NeoLens не лише у військовій сфері, а й у цивільному застосуванні. Схожі ШІ-асистенти вже використовуються в IT та на сайтах великих виробників, наприклад, Ford має такого асистента для своїх мануалів. Але, чесно кажучи, він не дуже добре розуміє контекст: видає набір PDF-файлів, які погано пов’язані між собою. Тобто потреба з пошуку кращих рішень існує навіть у таких гігантів, як Ford.
А як щодо техніки радянських часів?
В.Г.: Щодо техніки українського і радянського виробництва — питання більше пріоритету, ніж технічних обмежень. Ми спочатку фокусувалися на іноземній техніці, де є мовний бар’єр і де у військових не було відповідного навчання. Технічно ніщо не заважає додати українську чи радянську техніку.
О.К.: Коли ми починали, додавання нового тупу техніки займало півтора місяці — зараз це кілька днів. Наша ціль – це довести процес до кількох годин.
Чи плануєте додавати документацію по іноземних зразках, як-от PzH 2000, французький Ceaser, шведський Archer?
О.К.: Технічних обмежень немає — наша система дозволяє додавати будь-яку техніку, в тому числі в закритих контурах, де доступ мають лише ті, хто вже має право на ці інструкції. Тож нам потрібен доступ до самих документів. Процедурних обмежень я теж зараз не бачу. Пріоритетизуємо за кількістю запитів від існуючих та потенційних користувачів. Конкретно цих зразків у планах зараз немає, але завтра все може змінитися.
Як щодо захисту NeoLens? Наприклад, від потрапляння до ворога чи від копіювання?
О.К.: Безпека ніколи не забезпечується якимось одним рішенням. Це завжди комбінація різних засобів, які закривають різні потенційні прогалини системи.
Перше і найважливіше – яку інформацію ми взагалі обробляємо. Ми отримуємо від користувача рівно стільки, скільки потрібно для відповіді. При реєстрації — лише ім’я або псевдонім та електронна пошта. Ми не збираємо ніякої інформації про локацію або дані, які є чутливими. А якщо її немає, то немає і жодного ризику витоку. Друге – на рівні бази даних і додатку є кілька рівнів захисту. Кожен зареєстрований користувач ніколи не зможе побачити інформацію іншого або документи, до яких не має доступу.
Третє – застрахуватися від потрапляння в полон з телефоном у кишені, на жаль, на 100% неможливо. Але в нашому додатку військовий бачить лише свої питання і свою техніку на відміну, скажімо, від систем ситуативної обізнаності, де доступ до інформації значно ширший. Тож це суттєво звужує простір для можливої втрати даних.
Доступ із IP-адрес Росії у нас заблокований – це базова річ. Коли з’явиться можливість інтеграції логіну через «Армія+» — це буде додатковий захист. Весь трафік зашифрований — це само собою.
І нарешті, офлайн-режим — це найвищий рівень безпеки. Телефон без інтернету не може нікуди надсилати жодної інформації. Офлайн-модель менша та дає трохи вужчі відповіді, ніж онлайн, але для користувача це максимальна захищеність.
На завершення: чи плануєте навчати асистента на американських статутах FM: по тактиці, діях підрозділів? Тобто умовний «цифровий офіцер»?
В.Г.: Мануал по виживанню це якраз FM 3-5.70. Він вже є в нас. Я впевнений, що будемо додавати і інші.
О.К.: Якщо артилерист вже має в одному додатку інструкцію з обслуговування своєї техніки та інструкцію до зброї — логічно мати там і тактичні підказки. З точки зору користувача це дуже зручно, і ми не бачимо причин не додавати ці можливості. Перша допомога, виживання — це вже інший тип документів, порівняно з ремонтом техніки, але наш ШІ чудово справляється з ними. Ми вже зараз працюємо над документами з бойової роботи. Мабуть, NeoLens найкраще себе показує в складних технічних питаннях і ремонтах, але тактичні підказки теж мають сенс, за потреби можемо це додавати.
Дізнатися більше на: militarnyi.com