DevOps olgunlaşması on yıl sürdü. AgentOps'un on sekiz ayı var. Beş sütun, çoğu şirketin henüz işe almadığı yeni rol ve OSP'nin kurmak zorunda kalmayacağınız işletim ekibini nasıl teslim ettiği.
AgentOps Çözümleri Nedir? Kısa Cevap
AgentOps çözümleri, bir AI ajanını canlıya çıktıktan sonra güvenilir tutan araç ve rutinlerdir: her konuşmayı izlemek, cevapları bir test setine karşı puanlamak, token harcamasına tavan koymak, kararları denetçi için kayda geçirmek ve alttaki modeli davranışı bozmadan değiştirmek. Beş katman, tek sahip. Sahada yığın şöyle görünür. İzleme: her turda prompt'u, bağlamı, araç çağrılarını ve maliyeti kaydeden Langfuse ya da bir OpenTelemetry hattı. Değerlendirme: her değişiklikte koşan bir altın set ve saldırgan test paketi — biz bunun için Arize Phoenix kullanıyoruz. Maliyet kontrolü: fatura geldikten sonra değil, tavana ulaşmadan önce uyaran konuşma-başı bütçe. Yönetişim: ISO 42001 maddelerine ve gerçekten tabi olduğunuz saklama kurallarına eşlenmiş denetim izi ve acil durdurma anahtarı. Geçiş: bir model sürümünden diğerine yazılı geçiş kılavuzu. Araçları satın almak işin kolay kısmı. Çoğu ekipte eksik olan, pazartesi sabahı bu beşinin sahibi olan kişi — bu kılavuzun geri kalanı tam da o boşluk hakkında.
On Sekiz Ayda DevOps'tan AgentOps'a
DevOps'un paylaşılan araçlarla, ortak sözlükle ve "üretim seviyesi" konusunda ortak bir fikirle tanınmış bir disipline kristalleşmesi yaklaşık on yıl aldı. AgentOps'un böyle bir pisti yok. Ajanlar üretime hızlı ulaştı: OpenAI, Assistants API'sini Kasım 2023'te açtı; Şubat 2024'te Klarna'nın asistanı şirketin müşteri hizmetleri sohbetlerinin üçte ikisini yürütüyordu. 2026'nın ikinci çeyreğinde ölçekte çalıştıran kurumlar zaten keşfediyor — operasyonel gereksinimler ne klasik yazılıma ne de klasik ML'e benziyor. Drift daha hızlı, maliyet yüzeyi yabancı, başarısızlık modları yapısal değil dilsel. Rol gerçek zamanlı olarak somutlaşıyor; bunu erken fark eden ekipler kendilerine on iki aylık birikimli bir avantaj satın alıyor.
Disiplini Tanımlayan Beş Sütun
Birinci sütun monitoring — altyapı dashboard'ları değil, konuşma seviyesinde telemetri. Ajan ne dedi, kime, hangi bağlamda, hangi maliyetle. İkinci sütun eval — sürekli çalışan altın senaryo suite'i, adversarial sondalar, regresyon testleri; ideal olarak haftalık. Üçüncü sütun maliyet — konuşma, kullanıcı kohortu ve özellik başına token harcaması, tek bir kullanıcının harcaması 10x sıçradığında anormal uyarısı. Dördüncü sütun yönetişim — denetim izi, politika kayıtları, denetçilerin ve düzenleyicilerin talep edeceği kill-switch dokümantasyonu. Beşinci sütun migration — bir sonraki Claude veya GPT sürümü çıktığında modeli değiştirme kılavuzu. Çıkacak; sekiz hafta yükseltmeyi beklemek rekabetçi bir kayıp.
AgentOps Uzmanı: Çoğu Şirketin Henüz İşe Almadığı Rol
Deloitte'un 3.235 iş ve BT lideriyle yaptığı State of AI in the Enterprise 2026 araştırması açık konuştu — kuruluşunda ajan tabanlı yapay zekâ için olgun bir yönetişim modeli olduğunu söyleyenler yalnızca %21. Yürüttüğümüz kurulumlarda bu iş genellikle veri bilimi, platform mühendisliği ve ürün arasında bölünmüş durumda; hiçbiri bunu birincil sorumluluk olarak görmüyor. Bu boşluk teorik değil. Sabah 2'de bir şey kırıldığında ve üç ekip birbirini gösterdiğinde yüzeye çıkıyor. İş tanımı kendiliğinden yazıyor: eval boru hattını sahiplen, maliyet telemetrisini sahiplen, yönetişim dokümantasyonunu sahiplen, model migration kılavuzunu sahiplen. Tek kişi, tam sahiplik, uçtan uca. Ücret SRE ile ML mühendisi arasında konumlanıyor: Levels.fyi'da ABD medyan toplam ücreti SRE için yaklaşık 200 bin, ML mühendisi için 280 bin dolar; Scale AI'ın Nisan 2026'daki AgentOps mühendislik müdürü ilanında taban maaş 252–315 bin dolar.
Üretim-Birinci-Gün Kontrol Listesi
Tek bir ajan canlıya çıkmadan önce şunlar var olmalı. Yazılı bütçesi olan latency SLO. Sezgi değil eval geçme oranı olarak ifade edilmiş doğruluk tabanı. Bütçenin %70'inde uyarı veren konuşma başına maliyet tavanı. Kullanıcı bazlı rate limiting ve kötüye kullanım sezgileri. En uzun geçerli düzenleyici pencereye uyan denetim kaydı saklama politikası — KVKK sabit bir süre öngörmüyor; 5651 sayılı Kanun yer sağlayıcılardan bir ila iki yıl trafik kaydı, AB Yapay Zekâ Yasası yüksek riskli sistemlerde en az altı ay istiyor; sektörel kurallar çoğu zaman daha uzun. Staging ortamında en az bir kez test edilmiş geri alma prosedürü; ideal olarak rollback'in gerçekten çalıştığını kanıtlamak için kasıtlı olarak bozulmuş bir prompt şablonuyla. İnsan tarafından erişilebilir bir kanala bağlı kill switch. Hiçbiri egzotik değil. Denetlediğimiz ajanlarda bu listenin çoğu eksik — ve bu tesadüf değil.
OSP Retainer Katmanları — Hizmet Nasıl Görünüyor
Üç katman, AgentOps Uzmanı işe almanın büyük teknoloji şirketlerinin teklifleriyle yarışan uzun bir kıdemli arama anlamına geldiği mid-market gerçekliği için tasarlandı. Aylık 5 bin dolarlık Starter; izleme enstrümantasyonu, haftalık eval incelemesi, aylık maliyet raporu ve yılda bir model migration'ı kapsıyor. Aylık 10 bin dolarlık Standard; özel yönetişim dokümantasyonu, ISO 42001 hizalı politika eserleri ve üç ayda bir red-team egzersizleri ekliyor. Aylık 15 bin dolarlık Enterprise; 7/24 olay müdahalesi, özel eval suite geliştirme ve KVKK / EU AI Act uyum raporlamasını içine alıyor. Her katman aynı çekirdek dashboard'larla geliyor — izler için Langfuse, eval'ler için Phoenix, üstüne özel maliyet telemetrisi. Müşteriler ilişki bittiğinde dashboard'ları alıkoyuyor. Bu pazarda satıcı kilidi yanlış satış stratejisi.
Henüz Kurmak Zorunda Olmadığınız İşletim Ekibi
Ekonomi düz: kıdemli bir AgentOps Uzmanı SRE ile ML mühendisi arasında fiyatlanıyor — ABD'de medyan toplam ücret kabaca 200–280 bin dolar — üstüne ABD'de işveren ücret maliyetinin %30'unu oluşturan yan haklar geliyor; arama uzun sürüyor; çoğu şirketin içinde henüz var olmayan araç ve süreç iskelesi gerektiriyor. OSP retainer'ı katmana göre yılda 60 ila 180 bin dolar; birinci hafta başlıyor; aynı beş sütunu savaşta sınanmış kılavuzlarla teslim ediyor. İç rol nihayet geldiğinde — gelecek, çünkü her ciddi yapay zekâ konuşlandırması bu ihtiyaca yakınsıyor — retainer bilgi transferi angajmanına dönüşüyor. Dashboard'lar kalıyor. Kılavuzlar kalıyor. Yeni işe alınan kişi sıfırdan kurmak yerine birinci günde üretime hazır bir işletim katmanı buluyor. Asıl teklif bu: henüz kurmak zorunda olmadığınız işletim ekibi.