Экзамен по биохимии с ChatGPT

Экзамен по биохимии с ChatGPT

Биомолекула

Пока что, отвечая даже на самые простые вопросы, ChatGPT далеко не всегда дает осмысленные ответы. На попытку узнать что-то о функции белка по его последовательности чат-бот смог выдать лишь очень краткую и общую справку.

Вопрос к чату GPT: каков коэффициент распределения вода/октанол для терпеноидного спирта линалоола? Экспериментально измеренное значение коэффициента logP составляет 3,19, а чат-бот выдал 3,2 — довольно точно!
Вопрос к чату GPT: каков коэффициент распределения вода/октанол для бициклического терпеноидного кетона камфоры? Экспериментальное значение logP 2,74, а по мнению чата GPT это 1,69 — сомнительно, но ок...
Вопрос к чату GPT: записать химическую формулу гептана в SMILES-нотации. Увы, неверно! В гептане семь углеродов, а не 8.
Вопрос к чату GPT: какую функцию выполняет белок с заданной последовательностью? (И даем ему последовательность циклин-зависимой киназы CDK7.) Нууу, такое: одни общие слова. А между тем, это важнейший регулятор клеточного цикла!
Вопрос к чату GPT: какую функцию выполняет белок CDK7? (Тут мы уже явно указали имя белка.) Результат куда лучше — ну да, ему же не пришлось сопоставлять последовательность с именем белка, достаточно было просто «вспомнить», что про такие белки написано в «Википедии».

Конечно, мы далеко не первыми решили проэкзаменовать ChatGPT: ученые проводили гораздо более системные и вдумчивые проверки. Однако выводы коллег были очень похожи на наши: ChatGPT пока не готов тягаться с экспертами. Некоторые ученые решили исправить этот недочет. Они научили ChatGPT спрашивать совет у специальных программ, которые предсказывают свойства биомолекул, и он прошел экзамен с куда бóльшим успехом. Кроме того, ученые использовали возможности ChatGPT для написания кода новых программ и пайплайнов вычислительной химии и биологии.

Конечно, подобным применением чатботов использование больших языковых моделей и нейросетей в биофизике и смежных областях не исчерпывается. В новой статье спецпроекта “Искусственный интеллект в биологии” мы подробно расскажем, почему они могут снискать успех в химии и биологии.



Report Page