ChatGPT, Microsoft'un Azure süper bilgisayar altyapısını kullanır.
ChatGPT, OpenAI tarafından geliştirilen ve Kasım 2022'de piyasaya sürülen bir sohbet robotudur. OpenAI'nin GPT-3 büyük dil modelleri ailesinin üzerine inşa edilmiştir, hem denetlenen hem de takviyeli öğrenme teknikleri kullanılarak, GPT-3.5'in üzerine ince ayarlanmıştır ve insan tarafından denetlenen, takviyeli öğrenme yaklaşımlarının bir kombinasyonu kullanılarak eğitilmiştir. Denetlenen öğrenmede, insan eğitmenler modele konuşma verileri sağlamak için bir konuşmanın her iki tarafını da oynamıştır.
Takviye adımında, insan eğitmenler modelin önceki bir konuşmada oluşturduğu yanıtları sıralamış ve bu sıralamalar, modelin yakınsal Politika Optimizasyonunun birkaç yinelemesi kullanılarak daha da ince ayarlandığı ödül modelleri oluşturmak için kullanılmıştır. OpenAI, modeli eğitmek için Azure süper bilgisayar altyapısında Microsoft ile iş birliği yapmıştır. ChatGPT, kullanıcılar tarafından birçok bilgi alanında ayrıntılı ve anlaşılır yanıtlar elde etmek için kullanılmıştır, ancak düzensiz gerçek doğruluğu önemli bir dezavantaj olarak belirlenmiştir. OpenAI, modeli daha fazla eğitmek ve ince ayar yapmak için kullanılabilecek yukarı oylama, aşağı oylama ve geri bildirim metin alanları sağlayarak ChatGPT kullanıcılarından veri toplamaya devam etmiştir. ChatGPT'nin yayınlanmasının ardından OpenAI'nin değerlemesi, 29 milyar doları olarak tahmin edildi.
ChatGPT, müzik bestelemek, denemeler yazmak ve test sorularını ortalama bir insan test katılımcısından zaman zaman daha iyi yanıtlamak gibi çeşitli görevleri gerçekleştirebilen, OpenAI tarafından geliştirilen, çok yönlü bir sohbet robotudur. ChatGPT, Microsoft'un Azure süper bilgisayar altyapısında denetlenen ve takviyeli öğrenme teknikleri kullanılarak eğitilir. Kullanıcılar, yanıtları yukarı veya aşağı oylayarak ve ek geri bildirimlerle bir metin alanını doldurarak geri bildirim sağlayabilir. Çoğu sohbet robotunun aksine, ChatGPT aynı konuşmadaki önceki istemleri hatırlar ve bu da kişiselleştirilmiş bir terapist olarak kullanılabileceği önerilerine yol açmıştır. Saldırgan çıktıları önlemek için, sorgular OpenAI'nin şirket çapındaki moderasyon API'sinden geçer, ırkçı veya cinsiyetçi istemler reddedilir. Ancak ChatGPT'nin makul görünen yanlış veya saçma cevaplar üretmesi, yapay zeka halüsinasyonu olarak bilinen bir davranış ve performansı engelleyen Goodhart yasası gibi birkaç sınırlaması vardır. ChatGPT, 2021'den sonra meydana gelen olaylar hakkında sınırlı bilgiye sahiptir ve siyasi görüşler ifade edemez veya siyasi aktivizmde bulunamaz. Ayrıca, eğitim verilerindeki algoritmik önyargı, ChatGPT'nin uygunsuz veya saldırgan yanıtlar üretmesine neden olabilir.
