​​OpenAI Илона Маска показала новые нейросети

Компания OpenAI, среди основателей которой — совладелец SpaceX и Tesla Илон Маск, в начале января рассказала о новом шаге в развитии искусственного интеллекта — двух своих новых нейронных сетях.

CLIP (Contrastive Language — Image Pre-training) — нейронная сеть, которая эффективно распознает изображения и выбирает их текстовое описание из заранее заданных вариантов. CLIP тестировалась в так называемом режиме Zero-shot learning, при котором классы объектов в тесте не использовались при обучении, то есть программа встречала их впервые. Процент правильных ответов CLIP превысил результаты у других подобных программ. Полная статья об этой сети доступна по ссылке: https://openai.com/blog/clip/

DALL·E (названа в честь художника Сальвадора Дали и пиксаровского робота ВАЛЛ·И) занимается полностью противоположным и создает изображения из текста. Это нейронная сеть на основе GPT-3 (Generative Pre-trained Transformer 3 — наиболее крупная и продвинутая языковая модель в мире, которую разрабатывает OpenAI) с 12 млрд используемых параметров, которая обучалась на основе сета данных состоящих из пар “текст—изображение”.

DALL·E обнаружила в себе разнообразные способности, включая создание антропоморфных версий животных и объектов, правдоподобное объединение несвязанных понятий, визуализацию текста и применение преобразований к существующим изображениям. Оценить возможности DALL·E можно по ссылке — https://openai.com/blog/dall-e/
The Art of Tweeting: Crafting Engaging and Shareable Content on Twitter