Rapor: Araştırma, endüstri, politika vb. perspektiflerden 2023'te yapay zekanın mevcut durumu

Orjinal başlık: "2023 Yapay Zekanın Durumu Raporu"

Yazar: 36Kr'nin derleme ekibi İlahi Tercüme Bürosu BONI

Görüntü kaynağı: Sınırsız AI tarafından oluşturuldu

Belki gelecek yıl, yapay zeka tarafından üretilen şarkılar Billboard Top 10 listesine girer

Editörün özeti: Giderek dijitalleşen, veri odaklı dünyamız için yapay zeka, teknolojik ilerlemenin bir güç çarpanıdır. Bu nedenle, yapay zekanın mevcut gelişim durumunu anlamak çalışmalarımız için önemlidir. Bu "2023 Yapay Zekanın Durumu Raporu", yapay zekanın mevcut durumunu araştırma, endüstri, politika, güvenlik vb. açılardan özetliyor ve yapay zekanın gelişim dinamiklerini anlamanıza yardımcı olmayı umarak önümüzdeki 12 ay içinde yapay zekanın gelişimi için tahminlerde bulunuyor. Makale derlemeden alınmıştır.

Araştırma

2023 kesinlikle büyük dil modellerinin (LLM'ler) yılı ve OpenAI'nin GPT-4'ü, hem klasik yapay zeka kıyaslamalarında hem de insanlar için tasarlanmış sınavlarda diğer tüm LLM'leri başarıyla geride bırakarak dünyayı şok etti.

GPT-4'ün yetenekleri diğer büyük modelleri eziyor: OpenAI, onu yalnızca klasik doğal dil işleme kıyaslamalarıyla değil, aynı zamanda insanları değerlendiren bazı testlerle de (baro sınavları, GRE, kuvvet kesintileri vb.) test etti; GPT-4 ayrıca halüsinasyon konularında önceki modelden daha iyi performans gösterdi

Güvenlik ve rekabetle ilgili endişeler nedeniyle, yapay zekanın buna daha az açık hale geldiğini gördük. GPT-4 ile ilgili olarak, OpenAI yalnızca çok sınırlı bilgi içeren bir teknik rapor yayınladı, Google, PaLM2 hakkında fazla bir açıklama yapmadı ve Anthropic, Claude olsun ya da olmasın herhangi bir teknik bilgi açıklamadı... Veya Claude 2.

İster bir teknoloji devi ister bir start-up olsun, önde gelen şirketler yapay zeka teknolojilerinin ayrıntıları konusunda utangaç hale geliyor

Bununla birlikte, Meta AI ve diğer şirketler, GPT-3.5'in birçok özelliğine rakip olan açık kaynaklı bir LLM geliştirip yayınlayarak açık kaynak alevini yanmaya devam etmek için adım attılar.

Meta açık kaynaklı LLaMa'yı piyasaya sürdü, böylece büyük modeller için açık kaynaklı bir yarış başlattı, açık kaynaklı modellerin yardımıyla bazı insanlar modellere ince ayar yapmaya ve dikey alanlar için uygulamalar geliştirmeye başladı

Hugging Face'in skor tablolarına bakıldığında, indirmelerin ve model gönderimlerinin tüm zamanların en yüksek seviyelerine yükselmesiyle açık kaynak her zamankinden daha aktif. Özellikle, LLaMa modeli son 30 gün içinde Hugging Face'de 32 milyondan fazla kez indirildi.

Hugging Face, '22'ye kıyasla 23'te veri kümelerinin, alanların ve modellerin sayısında önemli bir artışla açık kaynaklı yapay zeka için bir tapınak haline geldi

Büyük dil modellerinin performansını değerlendirmek için birçok farklı (çoğunlukla akademik) kriterimiz olsa da, bu farklı değerlendirme kriterlerinin ortak noktası ve en büyük bilim ve mühendislik kriteri şudur: "rezonans"

Açık kaynak ve kapalı kaynak dil modellerinin artması ve eğitim verilerinin benzerliği ile LLM'ler arasında farklılaşma eksikliği vardır ve bu da modellerin değerlendirilmesini zorlaştırmaktadır. Modelin yeteneklerini karşılaştırmak için mevcut ana kriter, Stanford'un HELM liderlik tablosu ile Hugging Face'in LLM Benchamark'ıdır, ancak kullanıcılar daha öznel bir yaklaşımı tercih ediyor gibi görünmektedir: rezonans.

LLM'lerdeki heyecan verici atmosfere ek olarak, Microsoft da dahil olmak üzere araştırmacılar, küçük dil modellerinin olanaklarını araştırıyorlar ve son derece uzmanlaşmış veri kümeleriyle eğitilmiş modellerin 50 kat daha büyük rakiplere rakip olabileceğini buluyorlar.

Microsoft, küçük dil modellerinin, çok özel ve özenle seçilmiş veri kümeleri üzerinde eğitildiğinde 50 kata kadar daha büyük modellerle rekabet edebileceğini bulmuştur.

Epoch AI'daki ekip bunu doğru yaparsa, bu iş daha da acil hale gelebilir. Önümüzdeki "iki yıl" içinde yüksek kaliteli dil veritabanlarının stoklarının tükenme riskiyle karşı karşıya kalacağımızı tahmin ediyorlar ve bu da laboratuvarların alternatif eğitim verisi kaynaklarını keşfetmesine yol açıyor.

Bazı araştırma ekipleri, 2030 ile 2050 arasında tükeneceği tahmin edilen düşük kaliteli dilsel veriler, 2026 yılına kadar toplanan yüksek kaliteli dilsel veriler ve 2030 ile 2060 arasında görsel veriler ile insan tarafından oluşturulan verilerin tükendiğine inanıyor.

Statükoya daha yüksek bir düzeyde bakın - son yıllarda azalmış olmasına rağmen, ABD hala başı çekiyor ve çok alıntı yapılan makalelerin büyük çoğunluğu hala az sayıda ABD kurumundan geliyor.

Çin, yapay zeka araştırmaları alanında ikinci sırada yer aldı

Endüstri

Tüm bu çalışmalar, özellikle NVIDIA iseniz, donanım işine girmek için harika bir zaman olduğu anlamına gelir. GPU talebi, çiplerin yapay zeka araştırmalarında "diğer alternatiflerin toplamından" 19 kat daha fazla kullanılmasıyla onları trilyon dolarlık kulübe itti.

Yapay zeka araştırmaları esas olarak NVIDIA'nın çiplerini kullanır. Not: Y ekseninin ölçeği üstel bir değişimdir

NVIDIA yeni yongalar sunmaya devam ederken, eski GPU'ları olağanüstü yaşam boyu değer gösteriyor. 2017'de piyasaya sürülen V100, 2022'nin AI araştırma makalelerinde en popüler GPU'dur. Bu CPU 5 yıl içinde durdurulabilir, bu da 10 yıldır hizmette olduğu anlamına gelir.

NVIDIA'nın V100 yongası güçlü canlılık gösteriyor

NVIDIA H100'e olan talebin hızla arttığını gördük ve laboratuvarlar büyük bilgi işlem kümeleri oluşturmak için acele ediyor ve daha fazlası da yolda olabilir. Ancak, bu inşaat projelerinin büyük mühendislik zorlukları olmadan gelmediğini duyduk.

NVIDIA'nın en büyük Google A3 GPU'su olan en yeni GPU H100 ile oluşturulan AI bilgi işlem gücü kümesi, 26.000 GPU kullanıyor

"Çip savaşları", NVIDIA, Intel ve AMD'nin büyük Çinli müşteri tabanları için özel, yaptırımlara uygun çipler inşa etmesiyle endüstriyi de uyum sağlamaya zorladı.

Bu resimdeki çiplerin bir kısmı Amerika Birleşik Devletleri tarafından kontrol listesine eklenmiştir

Belki de tüm zamanların en şaşırtıcı olmayan haberi şudur: Chat-GPT, tüm zamanların en hızlı büyüyen internet ürünlerinden biridir. Özellikle geliştiriciler arasında popülerdir ve geliştiricilerin kodlama sorunlarına çözüm bulması için yeni bir yer olarak Stack Overflow'un yerini almıştır.

ChatGPT'nin yükselişi, Stack Overflow'un düşüşüyle tam bir tezat oluşturuyor

Ancak Sequoia Capital'e göre, görüntü oluşturmadan yapay zeka arkadaşlarına kadar her şeyde tutarsız elde tutma oranlarıyla üretken yapay zeka ürünlerinin kalıcı gücünden şüphe etmek için artık nedenler var.

Genel halkın AI ürünlerine olan ilgisi bir heves gibi görünüyor

Tüketici yazılımı alanına ek olarak, üretken yapay zekanın fiziksel yapay zeka alanındaki ilerlemeyi hızlandırabileceğine dair işaretler var. Wayve GAIA-1 etkileyici bir çok yönlülük sergilemiştir ve otonom sürüş modellerini eğitmek ve doğrulamak için güçlü bir araç olarak kullanılabilir.

GAIA-1, yapay zekayı aşırı durumlara yanıt verecek şekilde eğitmek için gerçekçi sürüş senaryoları oluşturmak için video, metin ve eylem girdilerini kullanır

Üretken yapay zekaya ek olarak, yapay zeka için uygun uygulamalar bulmakta zorlanan sektörlerden de önemli hamleler görüyoruz. Birçok geleneksel ilaç şirketi, tüm bahislerini yapay zekaya yatırdı, Exscientia ve InstaDeep gibi şirketlerle milyarlarca dolarlık anlaşmalar yaptı.

Ana akım ilaç şirketleri kendilerini yapay zeka destekli ilaç geliştirmeye adamaya başlıyor

Ordular asimetrik savaşla başa çıkmak için güçlerini modernize etmek için acele ederken, yapay zekaya öncelik veren savunma pazarı patlama yaşıyor. Bununla birlikte, yeni teknolojiler ve yerleşik oyuncular arasındaki çatışma, yeni girenlerin bir yer edinmesini zorlaştırıyor.

Geçen yıl, ABD'li savunma start-up'ları 2,4 milyar dolar topladı

Bu başarılara ek olarak, VC endüstrisi, Atlas gibi teknoloji özel pazarlarının bir dilimini elinde tutan bir sektör olan üretken yapay zekaya odaklanıyor. Üretken yapay zekadaki pazar patlaması olmasaydı, yapay zekaya yapılan yatırım geçen yıla göre %40 düşecekti.

Dünyanın yapay zekaya yaptığı en önemli yatırım nispeten istikrarlı ve üretken yapay zeka yatırımın yeni sevgilisi haline geldi

Transformers'ın sinir ağlarını ilk kez tanıtan makalenin yazarları, yalnızca 2023'te Transformer Çetesi'nin milyarlarca dolarlık fon sağladığının canlı kanıtı.

"İhtiyacınız Olan Tek Şey Dikkat" kitabının yazarları o zamandan beri kendi işlerini kurmak için Google'dan ayrıldılar ve toplu olarak milyarlarca dolar fon topladılar

Aynı şey Baidu'nun Silikon Vadisi'ndeki bir yapay zeka laboratuvarı olan DeepSpeech2 ekibi için de geçerli. Konuşma tanıma için derin öğrenme üzerine yaptıkları çalışmalar, bize şu anda büyük ölçekli yapay zekanın temelini oluşturan büyütme yasasını gösteriyor. Bu ekibin üyelerinin çoğu, önde gelen makine öğrenimi şirketlerinde kurucu veya üst düzey yönetici olmaya devam etti.

Baidu'nun Silikon Vadisi Yapay Zeka Laboratuvarı'nın ilk çalışmaları, ölçeğin nasıl kazandığının bir kanıtıdır

En yüksek profilli gişe rekorları kıran finansman turlarının çoğu, geleneksel VC firmaları tarafından yönetilmedi. 2023, büyük teknoloji şirketlerinin ellerindeki savaş fonlarını etkin bir şekilde kullandığı kurumsal risk sermayesi yılıdır.

Risk sermayesinin ana gücü teknoloji devleri oldu

Siyaset

Şaşırtıcı olmayan bir şekilde, milyarlarca dolarlık yatırım, yeteneklerdeki büyük sıçramalarla birleştiğinde, yapay zekayı politika yapıcılar için gündemin en üstüne koydu. Spektrum, gevşekten sıkı bir şekilde düzenlenmişe kadar uzanır ve dünya çapında düzenlemeye yönelik çeşitli yaklaşımlar vardır.

Gevşekten sıkı bir şekilde düzenlenmişliğe, mevcut yasal çerçevelerden yararlanmaktan hedefli politikalar formüle etmeye kadar, ülkelerin YZ'yi düzenlemeye yönelik farklı tutumları vardır

Yapay zekanın küresel yönetişimi için, özellikle bir dizi küresel kuruluş tarafından bir dizi potansiyel teklif olmuştur. Matt Clifford ve diğerleri tarafından düzenlenen Birleşik Krallık Yapay Zeka Güvenlik Zirvesi, bu fikirlerin bazılarının somutlaştırılmasına yardımcı olabilir.

Yapay zekanın küresel yönetişimi hala erken aşamalarında

Yapay zekanın gücünü savaş alanında görmeye devam ettikçe, bu tartışmaların daha da acil hale gelmesi muhtemeldir. Ukrayna'daki çatışma, yapay zeka savaşı için bir laboratuvar haline geldi ve nispeten doğaçlama patchwork sistemlerinin bile akıllıca entegre edildiğinde nasıl yıkıcı etkilere sahip olabileceğini gösterdi.

Ukrayna, yapay zeka savaşı için bir test alanı haline geldi

Bir başka potansiyel parlama noktası, gelecek yılki ABD başkanlık seçimleri. Şimdiye kadar, deepfake'ler ve yapay zeka tarafından oluşturulan diğer içerikler, geçmişin dezenformasyon türüne kıyasla nispeten sınırlı bir rol oynadı. Ancak düşük maliyetli, yüksek kaliteli bir model bunu değiştirebilir ve önleyici eyleme yol açabilir.

Yapay zekanın seçimlere müdahale etmek için kullanılma ihtimali yüksek

Önceki Yapay Zeka Durumu raporları, büyük laboratuvarların yapay zekanın güvenliğini göz ardı edebileceği konusunda uyardı. 2023'te insanlığın yapay zeka nedeniyle hayatta kalma riski altında olup olmadığı konusundaki tartışmalar yoğunlaştı ve araştırmacılar arasında açık kaynak ve kapalı kaynak konusundaki tartışmalar yoğunlaştı ve yok olma riski manşetlere taşındı.

Yapay zeka (AI) inanılmaz yeteneklerini gösterdikçe, bazı uzmanlar insanlığın hayatta kalmasına yönelik riskler konusunda endişe duymaya başladılar

...... Söylemeye gerek yok, herkes aynı fikirde olmasa da - Yann LeCun ve Marc Andreessen ana şüpheciler.

Nesli tükenme riski söz konusu olduğunda, uzmanlar iki kampa ayrılır

Politika yapıcıların, AI'yı anlamakta zorlanmalarına rağmen, AI'nın potansiyel risklerinden endişe duymaları şaşırtıcı değil. Birleşik Krallık, Ian Hogarth liderliğindeki özel bir Frontier AI Görev Gücü'nün oluşturulmasına öncülük etti ve Amerika Birleşik Devletleri bir kongre soruşturması başlattı.

Dünyanın dört bir yanındaki hükümetler yapay zekaya dikkat etmeye başlıyor

Hala teorik anlaşmazlıklar olsa da, laboratuvarlar çoktan harekete geçmeye başladı ve Google DeepMind ve Anthropic, geliştirme dağıtımlarının aşırı risklerini azaltma konusunda yaklaşımlarını daha ayrıntılı olarak detaylandıran ilk kişiler arasındaydı.

Büyük laboratuvarlar riski azaltmak için harekete geçmeye başladı bile

Uzak geleceğe değinmeden bile, insan geri bildirimine dayalı pekiştirmeli öğrenme (Chat-GPT gibi teknolojilerin temelini oluşturan) gibi teknikler hakkında zor sorular soruluyor.

İnsan geri bildirimine dayalı pekiştirmeli öğrenme, bazı temel zorluklarla karşı karşıyadır

Tahmin

Her zaman olduğu gibi, şeffaflık ruhuyla, geçen yılın tahminlerine dikkat ediyoruz - 5/9 puan aldık.

✅ LLM eğitimi, üretken AI / ses, teknoloji devleri tamamen genel AI Ar-Ge'ye, uyum yatırımlarına ve eğitim verilerine yatırım yapmaktadır.

❌ Çok modlu araştırmalar, biyogüvenlik laboratuvarı düzenlemesi ve yarı mamul start-up'lar için Doom.

İşte önümüzdeki 10 ay için 12 tahminimiz! Bunlar şunları içerir:

• Üretken Yapay Zeka / Film Yapımı

• Yapay Zeka ve Seçimler

• Kişisel gelişim ajanları

• Halka arzların geri dönüşü

• Değeri 1 milyar doları aşan modeller

• Rekabet araştırmaları

• Küresel yönetişim

• Banka + GPU

-Müzik

• Çip alımları

1. Hollywood sınıfı yapımlar, görsel efektler üretmek için üretken yapay zekayı kullanacak 2. 2024 ABD seçimlerinde üretken teknolojiyi kötüye kullandığı için soruşturulan üretken bir yapay zeka medya şirketi olacak 3. Karmaşık ortamlarda (örneğin, AAA oyunları, araç kullanımı, bilim vb.) kendi kendini geliştiren AI ajanlarının performansı, en son teknolojiyi ezecektir 4. Teknoloji halka arz piyasası dondurulacak ve en az bir yapay zeka odaklı şirket halka açılacak (örneğin Databricks) 5. Üretken yapay zeka için büyük modelleri eğitmenin maliyeti 1 milyar doların üzerine çıkabilir 6. ABD'deki FTC veya Birleşik Krallık'taki UMA, Microsoft/OpenAI anlaşmasıyla ilgili bir rekabet soruşturması başlatacak 7. Gönüllülük dışında, küresel YZ yönetişiminde sınırlı ilerleme olacaktır 8. Finansal kurumlar, risk sermayesi öz sermayesinin yerini alacak ve bilgi işlem gücünü finanse etmek için GPT borç fonunu başlatacak 9.AI oluşturulan şarkılar Billboard Top 10 Hits listesine veya Spotify Hits 2024'e girecek 10. Çıkarım yükleri ve maliyetleri hızla artarken, büyük bir yapay zeka şirketi (OpenAI gibi) çıkarım için bir yapay zeka çip şirketi satın alır