Copilot Studio Kit, Microsoft’un Power CAT (Power Customer Advisory Team) ekibinin geliştirdiği ücretsiz ve açık kaynaklı bir araç setidir. Microsoft Copilot Studio’nun üzerine inşa edilmiş olan bu kit; test etme, prompt geliştirme, yönetişim ve analitik gibi konularda çekirdek ürünün sunmadığı araçları bir araya getiriyor.

Peki bu kit tam olarak ne sunuyor? Gelin her bir özelliğe bakalım.

1. Webchat Playground

Ajanınızın web sohbet arayüzünü görsel olarak özelleştirmenizi sağlar. Renkler, yazı tipleri, avatar, küçük resim gibi her şeyi canlı önizleme eşliğinde ayarlayabilirsiniz. Üç panelden oluşur: sol panelde kayıtlı temalar, ortada canlı önizleme, sağda ise JSON veya HTML kod çıktısı. HTML çıktısını doğrudan web sunucunuza yükleyebilirsiniz. Erişilebilirlik denetimi de yerleşik olarak geliyor.

2. Prompt Advisor

Prompt’larınızı analiz edip iyileştirmenize yardımcı olan bir araç. Prompt’unuzu girin, “Analiz Et”e basın; 0-100 arasında bir güven puanı ve ayrıntılı bir değerlendirme alırsınız. Araç aynı zamanda farklı tekniklerle (zero-shot, few-shot, chain-of-thought) optimize edilmiş alternatif prompt’lar önerir. Beğendiğiniz birini seçip “Uygula ve İyileştir” ile döngüyü sürdürebilirsiniz.

Güven puanı nasıl yorumlanır:

• 80-100: Prompt iyi yapılandırılmış, doğru sonuçlar üretmeye hazır.
• 50-79: Prompt makul ama iyileştirme alanı var.
• 0-49: Prompt yetersiz, önemli değişiklikler gerekiyor.

Not: Prompt Advisor, AI Builder kredisi kullanır.

3. Adaptive Cards Galerisi

Farklı senaryolar için hazır Adaptive Card şablonları sunar. Her şablon örnek veri ve arka uç uygulama detaylarıyla birlikte gelir. Canlı önizleme özelliği sayesinde kartın nasıl görüneceğini anında görebilirsiniz. “Copilot Studio’da Aç” seçeneğiyle ilgili konunun arka uç implementasyonunu doğrudan inceleyip kopyalayabilirsiniz.

4. SharePoint Senkronizasyonu

Seçili SharePoint içeriklerini düzenli aralıklarla ajanınızın bilgi tabanına dosya olarak senkronize eder. Otomatik olarak çalışır; isterseniz ajan yapılandırmasındaki “Dosyaları Senkronize Et” seçeneğiyle manuel olarak da tetikleyebilirsiniz. “Bağlantıyı Doğrula” ile yapılandırmanızın doğruluğunu kontrol edebilirsiniz.

SharePoint’i doğrudan bilgi kaynağı olarak eklemekten farkı:

• 512 MB’a kadar dosya desteği
• Daha düşük yanıt gecikmesi
• PDF’lerdeki metin dışı öğelerin (tablo, grafik vb.) indekslenmesi
• Daha geniş dosya türü desteği

5. Conversation Analyzer (Konuşma Analizörü)

Ajanınızın konuşma transkriptlerini özel prompt’larla analiz ederek içgörüler çıkarmanızı sağlar. İki yerleşik prompt hazır gelir: Duygu Analizi ve Kişisel Veri Analizi. Kendi prompt’larınızı oluşturup kaydedebilir ve sonraki analizlerde yeniden kullanabilirsiniz. Sonuçlar; konuşma kimliği, özet, süre, kullanılan prompt ve transkriptin yan yana görünümünü içerir.

6. Agent Inventory (Ajan Envanteri)

Tenant genelindeki tüm Copilot Studio özel ajanlarına görünürlük sağlar. Her ajan için şu bilgileri görebilirsiniz: oluşturulma tarihi, yayın durumu, kimlik doğrulama türü, bilgi kaynakları, prompt kullanımı, orkestrasyon türü ve üretken yapay zeka özellik kullanımı. Dashboard’da ajan büyüme zaman çizelgesi, detaylı ajan görünümü, filtreli liste görünümü ve son 30 güne ait kullanım metrikleri yer alır. Tüm veriler dışa aktarılabilir.

7. Agent Review Tool (Ajan İnceleme Aracı)

Ajanlarınızı performans veya güvenlik açısından sorun yaratabilecek durumlar ve anti-pattern’lar için tarar. Analiz sonucunda bulgular; önem derecesi ve nasıl çözüleceğine dair açıklamalarla birlikte okunması kolay bir formatta sunulur.

8. Test Capabilities (Test Özellikleri)

Ajanlarınız için test ve test setleri oluşturmanıza, ardından bunları toplu olarak çalıştırmanıza olanak tanır. Test sonuçları; gecikme süreleri, gözlemlenen yanıtlar ve çalıştırma düzeyinde toplu veriler içerir. Desteklenen test türleri: yanıt eşleştirme, ek eşleştirme, konu eşleştirme ve üretken yanıtlar.

9. Pipeline ile Otomatik Test

Power Platform Pipelines kullanarak özel ajanların test ve dağıtımını otomatikleştirir. Ajanlar, production ortamına geçmeden önce test çalıştırmalarından geçer. Power Automate akışlarını Dataverse ve Copilot Studio Kit ile entegre ederek dağıtım sürecine bir kalite kapısı ekler. Sürekli teslimat pratiklerini destekler.

10. Conversation KPIs (Konuşma KPI’ları)

Ajan başına konuşma sonuç verilerini Dataverse’te toplar. Takip edilen metrikler: oturum sayısı, tur sayısı ve konuşma sonuçları (çözüldü, kısmen çözüldü, eskalasyon, terk edildi). Günde iki kez otomatik çalışır ya da isteğe bağlı tetiklenebilir. Örnek Power BI raporlarıyla birlikte gelir. NPS gibi özel değişkenler tanımlayabilir, KPI kayıtlarıyla birlikte transkriptleri de saklayabilirsiniz.

11. Agent Value (Ajan Değeri)

Copilot Studio ajanlarını tür, davranış ve değer açısından sınıflandırmak için modüler bir araçtır. Her ajanın kuruluş içindeki rolünü anlamaya, stratejik hedeflerle hizalamaya ve sunduğu değeri ölçmeye yardımcı olur. Sonuçlar Agent Value dashboard’unda görsel olarak sunulur.

Sonuç

Copilot Studio Kit, çekirdek üründe gerçekten eksik olan boşlukları dolduran ücretsiz ve açık kaynaklı bir araç setidir. Agent geliştirici ya da tenant yöneticisi olun, bu kitte size özel bir şeyler var. Power CAT tarafından aktif olarak geliştirilmeye devam ediyor.