|
К вопросу о том, что должны секретить разработчики ИИ с нейросетями. Предположим например, что дроидоделы StarWars входят в эту группу...
... Хотя метод «заточен» именно для конкретной нейросети, но в комментариях к прошлым научным статьям на эту тему обращали внимание на ремарку исследователей, что, скорее всего, атака подействует на многие модели, обученные на данном конкретном наборе данных — включая разные архитектуры свёрточных сетей и даже линейные классификаторы. Так что для проведения атаки достаточно гипотезы, на основе каких данных могла обучаться модель. «В конкретных терминах это означает, что вполне вероятно, появляется возможность создать дорожный знак о продаже дома, который для человеческих водителей кажется совершенно обычным, но для беспилотного автомобиля будет казаться пешеходом, который внезапно появился на тротуаре, — сказано в научной работе. — Состязательные примеры вызывают практический интерес, который нужно учитывать по мере того, как нейросети становятся всё более распространёнными (и опасными)». Для защиты от подобных атак разработчики ИИ будущего может держать в секрете информацию об архитектуре своих нейросетей, а главное — о наборе данных, который использовался при обучении. ... отсюда Но как-то это (кажется) дурной принцип - секретить такое... #Geektimes 9 ноября 2017
2 |
|
Матемаг
1. Это математика. Я, честно говоря, не очень копал об ограничениях применимости этих теорем - но речь о очень глубоких принципах. 2. С одной стороны, речь о аппаратном ускорении тензорной плавучки малой точности. Это довольно универсальный подход, хотя конечно шаг в сторону от возможностей конкретных АЛУ - и быстродействие падает радикально. С другой стороны, речь о "кремниевых нейронах" - и тут всё куда сложнее... 3. Идеальное обучение невозможно. Более того, как-то обновлять и обмениваться "опытом", как-то достраивать даже на конечных устройствах (правда, это очень сложно сочетается с надёжностью/безопасностью) похоже придётся почти всегда для хоть сколько-нибудь человекозаменяющих систем. |
|
|
Матемаг Онлайн
|
|
|
1. А можно где-нибудь обзор этих штук? В смысле, на русском и именно общий, что ли. Например, о той же теореме Гёделя вполне можно без особых проблем рассказать человеку с улицы, слегка введя в термины. Есть эдакое что-то о работах Уолперта али не знаешь-с?
2. Ясно, что ничего не ясно. 3. Точно так же, как и меняют прошивки на телефонах или обновляют программы до новых версий. Не вижу в этом ничего за рамки выходящего обычного процесса поддержки ПО, в котором периодически находятся разного рода баги. |
|
|
Матемаг
Популярно, с водой и неточностями и без конкретных формул - Педро Домингос "Верховный алгоритм: как машинное обучение изменит наш мир". |
|
|
Матемаг Онлайн
|
|
|
Вода-то ладно... но неточности:( Спасибо за наводку, в любом случае.
|
|