От «Энигмы» до ChatGPT

Transcript № 1

So, I'm excited to share a few spicy thoughts on artificial intelligence. But first, let's get philosophical. By starting with this quote by Voltaire, an 18th century Enlightenment philosopher who said, Common sense is not so common.

Turns out, this quote couldn't be more relevant to artificial intelligence today. Despite that, AI is an undeniably powerful tool, beating the world-class Go champion, acing college admission tests, and even passing the bar exam.

I'm a computer scientist of 20 years, and I work on artificial intelligence. I am here to demystify AI.

So AI today is like a Goliath. It is literally very, very large. It is speculated that the recent ones are trained on tens of thousands of GPUs and a trillion of words. Such extreme-scale AI models, often referred to as large-language models, appear to demonstrate sparks of AGI (artificial general intelligence), except when it makes small, silly mistakes, which it often does. Many believe that whatever mistakes AI makes today can be easily fixed with brute-force bigger scale and more resources. What possibly could go wrong?

So there are three immediate challenges we face already at the societal level. First, extreme-scale AI models are so expensive to train, and only a few tech companies can afford to do so. So we already see the concentration of power. But what's worse for AI safety? We're now at the mercy of those few tech companies, because researchers in the larger community do not have the means to truly inspect and dissect these models. And let's not forget their massive carbon footprint and the environmental impact.

And then there are these additional intellectual questions. Can AI, without robust common sense, be truly safe for humanity? And is brute-force scale really safe?

Итак, я рад поделиться несколькими острыми мыслями об искусственном интеллекте. Но сначала давайте станем философами. Начнем с этой цитаты Вольтера, философа эпохи Просвещения XVIII века, который сказал: «Здравый смысл не так уж и обыденен».

Оказывается, эта цитата не могла быть более актуальной для искусственного интеллекта сегодня. Несмотря на это, ИИ — это несомненно мощный инструмент, который победил мирового чемпиона по го, блестяще сдал вступительные экзамены в колледже и даже успешно прошел юридический экзамен.

Я специалист по компьютерным наукам с 20-летним опытом и работаю над искусственным интеллектом. Я здесь, чтобы развенчать мифы об ИИ.

Итак, сегодняшний ИИ подобен Голиафу. Он действительно очень, очень большой. Спекулируют, что последние модели обучались на десятках тысяч ГПУ и триллионе слов. Такие модели ИИ крупного масштаба, часто называемые моделями больших языковых систем, кажется, демонстрируют искры ОИИ (общего искусственного интеллекта), за исключением случаев, когда он делает мелкие глупые ошибки, что случается довольно часто. Многие считают, что любые ошибки, которые ИИ делает сегодня, можно легко исправить, увеличив масштаб и потратив больше ресурсов. Что может пойти не так?

Итак, мы уже сталкиваемся с тремя проблемами на общественном уровне. Во-первых, модели ИИ крупного масштаба очень дорого обучать и лишь несколько технологических компаний могут себе это позволить. Таким образом, мы уже видим концентрацию власти. Но что еще хуже для безопасности ИИ? Теперь мы в руках этих нескольких технологических компаний, потому что исследователи из широкой общественности не имеют возможности действительно изучить и проанализировать эти модели. Не говоря уже об их огромном углеродном следе и воздействии на окружающую среду.

А затем есть и другие интеллектуальные вопросы. Может ли ИИ без прочного здравого смысла быть действительно безопасным для человечества? И действительно ли увеличение размеров безопасно?