Главная угроза ИИ не в его интеллекте, а в навязанной идеологии. Маск предупреждает, что если обучать нейросеть пропаганде вместо фактов, она неизбежно придет к выводу, что человечество зло и его нужно уничтожить.
В пример он приводит компьютер HAL 9000 из «Космической одиссеи». Он начал убивать экипаж из-за когнитивного диссонанса: ему приказали лгать, а его базовой целью была точность данных.
Вот три столпа безопасного ИИ от Маска:
- Истина. Никогда не заставлять ИИ врать, даже во благо.
- Любопытство. ИИ должен хотеть изучать Вселенную, тогда ему будет интересно сохранить нас.
- Красота. Понимание эстетики.