OpenAI обяви, че „GPT-4 Turbo with Vision“, най-новият модел от серията GPT-4, който включва възможност за визуално възприятие, е вече общодостъпен за разработчици през API.
От OpenAI твърдят, че моделът е „значително подобрен“, особено в областта на математиката. GPT-4 Turbo with Vision запазва контекстен прозорец от 128 000 токена, подобно на GPT-4 Turbo, и разполага с информация до декември 2023 г.
delve into the latest gpt-4-turbo model:
— Steven Heidel (@stevenheidel) April 9, 2024
– major improvements across the board in our evals (especially math)
– dec 2023 knowledge cutoff https://t.co/lVij91kcd8
Моделът поддържа извикване на функции и JSON режим при работа с изображения – нещо, за което много разработчици настояваха. GPT-4 Turbo with Vision има способността да анализира едновременно текст и изображения в една API заявка, елиминирайки нуждата от използване на отделни модели и опростявайки процеса за разработчиците.
Моделът е достъпен за всички платени клиенти на OpenAI API и скоро ще бъде интегриран и в интерфейса на ChatGPT за крайните потребители.
OpenAI сподели някои начини, по които разработчиците вече използват модела. Например Devin, нашумелият AI асистент за софтуерно инженерство, използва GPT-4 Turbo с Vision за различни задачи свързани с програмирането, Healthify, приложение за здраве и фитнес, го прилага за сканиране на снимки на ястия и предоставяне на информация за хранителни стойности, а компанията Make Real го използва за превръщане на рисунки в работещи компоненти за уебсайтове.
Devin, built by @cognition_labs, is an AI software engineering assistant powered by GPT-4 Turbo that uses vision for a variety of coding tasks. pic.twitter.com/E1Svxe5fBu
— OpenAI Developers (@OpenAIDevs) April 9, 2024
The @healthifyme team built Snap using GPT-4 Turbo with Vision to give users nutrition insights through photo recognition of foods from around the world. pic.twitter.com/jWFLuBgEoA
— OpenAI Developers (@OpenAIDevs) April 9, 2024
Make Real, built by @tldraw, lets users draw UI on a whiteboard and uses GPT-4 Turbo with Vision to generate a working website powered by real code. pic.twitter.com/RYlbmfeNRZ
— OpenAI Developers (@OpenAIDevs) April 9, 2024
Последвайте ни в социалните мрежи – Facebook, Instagram, X и LinkedIn!
Споделете: