Nasıl çalışıyor?

Bir metni gönderdiğinde ne olduğunu, sonucun ne kadar güvenilir olduğunu ve metnine ne olduğunu anlatıyoruz.

Akış

  1. 1

    Metni gönder

    Ana sayfada metni yapıştır ya da PDF, DOCX veya TXT dosyası yükle. PDF'lerde satır sonu tirelerini birleştiriyor, sayfa numaralarını ve kaynakçayı çıkarıyoruz.

  2. 2

    Ayarları seç

    İstersen “Analiz ayarları”ndan dil seçimini ve hangi analizlerin çalışacağını değiştir. Varsayılan olarak hazır olan her şey çalışır.

  3. 3

    İşaretli bölümleri incele

    Metin bölümlere ayrılıp puanlanır. Bir bölüme tıkladığında puanını ve açıklamasını görürsün.

  4. 4

    Önerileri uygula ya da reddet Yakında

    Düzeltme önerileri hazır olduğunda burada olacak.

  5. 5

    Raporu indir Yakında

    Sonuçları PDF rapor olarak indirme özelliği üzerinde çalışıyoruz.

Yöntem

Arkada XLM-RoBERTa adlı çok dilli bir dil modeli var. Onu yaklaşık 27 bin akademik metinle eğittik: DergiPark ve arXiv'den insanların yazdığı makale özetleri ve çeşitli yapay zekâ modellerine yazdırdığımız ya da düzelttirdiğimiz metinler.

Model her metin için üç ihtimal veriyor: insan yazmış, yapay zekâ düzeltmiş ya da karışık, tamamen yapay zekâ yazmış. Uzun metinleri parçalara bölüp her parçayı ayrı puanlıyoruz; genel sonuçta yapay zekâ örüntüsü taşıyan kısmın oranını da gösteriyoruz.

Eğitimde görmediği metinlerle test

Yapay zekâ metnini yakalamaİnsan metnine yanlış alarm
Türkçe%94%2,7
İngilizce%66%3,0

“Çok olası” eşiğinde. Test metinlerini, modelin eğitimde hiç görmediği bir yapay zekâ modeliyle ürettik; gerçek kullanıcı metinlerinde sonuç farklı çıkabilir.

Sınırlar

  • Sonuç bir olasılık. Hiçbir dedektör kimin yazdığını kanıtlayamaz; tek başına birini suçlamak için kullanılmamalı.
  • Ana dili İngilizce olan yazarların metinlerinde yanlış alarm daha yüksek. Bunu düzeltmeye çalışıyoruz.
  • 150 kelimenin altındaki metinlerde ve tek tek bölüm puanlarında sonuç daha az güvenilir.
  • Taranmış (görüntü) PDF'leri okuyamıyoruz. İki sütunlu dergi düzenlerinde metin karışabilir.

Metnine ne oluyor?

Analiz için gönderdiğin metin ve dosya sunucunun belleğinde işleniyor, sonuç sana dönünce siliniyor. Diske yazmıyoruz, içeriği kayıtlara geçirmiyoruz, modeli bununla eğitmiyoruz.

Bir metni araştırmada kullanmamızın tek yolu, onu “Katkı ver” sayfasından açık izninle kendin göndermen. Ayrıntılar aydınlatma metninde. Aydınlatma metni

Sık sorulanlar

Ücretli mi?

Şu an analiz ücretsiz ve üyelik gerektirmiyor.

Sonuç kesin mi?

Değil. Sonucu bir ipucu olarak gör. Tek bir yüzde vermek yerine hangi bölümün işaretlendiğini göstermemizin sebebi de bu.

Altı noktalı çizilen ifadeler ne demek?

“Bunun yanı sıra”, “bu bağlamda”, “furthermore” gibi kalıplar. İnsanlar da bunları kullanır, yani tek başlarına bir şey kanıtlamazlar. Yapay zekâ metinlerinde çok sık geçtikleri için ayrıca gösteriyoruz.

Kısa metinlerde neden “güvenilirlik düşük” diyor?

Model bir metne ne kadar çok kelimeyle bakarsa o kadar isabetli karar veriyor. 150 kelimenin altında sonuç rastlantıya daha açık.