Hukuki yapay zeka şirketi Harvey, yapay zekanın hukuki işleri ne kadar iyi yapabildiğini ölçmek için tasarlanmış açık kaynaklı bir kriter olan LAB'ı yayınladı. Yeni değerlendirme aracı, 24 pratik alanını kapsıyor ve 1.200'den fazla bireysel görev içeriyor; bu da yapay zeka sistemlerini karşılaştırmalı olarak değerlendirmek için bir yol sunuyor.
Kriter Neleri Kapsıyor?
LAB yalnızca tek bir avukatlık türünü test etmiyor. Kurumsal işlemlerden davalara, düzenleyici uyumdan fikri mülkiyete kadar geniş bir yelpazeyi kapsıyor. Her görev, bir madde taslağı hazırlama, bir davayı özetleme veya bir sözleşmedeki riski belirleme gibi gerçek bir hukuki görevi taklit edecek şekilde tasarlanmış. 24 pratik alanı, kriterin hem genel hukuki bilgiyi hem de uzmanlık bilgisini değerlendirmesine olanak tanıyor.
Açık Kaynaklı Bir Standart Neden Önemli?
Şu anda hukuki yapay zekayı değerlendirmek için yaygın olarak kabul görmüş bir yöntem bulunmuyor. Farklı şirketler kendi testlerini yapıyor ve sonuçları genellikle gizli tutuyor. Harvey'in LAB'ı açık kaynaklı olduğu için herkes görevleri inceleyebilir, testleri çalıştırabilir ve sonuçları gönderebilir. Bu şeffaflık, hukuk firmalarının, şirket içi hukuk ekiplerinin ve düzenleyicilerin daha iyi karşılaştırmalar yapmasına yardımcı olabilir. Ayrıca hukuki teknoloji topluluğunun zamanla yeni görevler ve pratik alanları eklemesine olanak tanır.
Hukuk Sektörü Üzerindeki Potansiyel Etki
Yapay zeka araçlarını değerlendiren hukuk firmaları için LAB tutarlı bir ölçüt sunuyor. Satıcı iddialarına veya sınırlı demolara güvenmek yerine, kriteri kendileri çalıştırabilirler. Bu, benimsemeyi hızlandırabilir veya mevcut sistemlerdeki eksiklikleri ortaya çıkarabilir. Yapay zeka geliştiricileri için kriter, modellerin zorlandığı alanları vurgulayarak iyileştirmeye teşvik ediyor. Harvey, LAB'ı dahili olarak kullanıyor, ancak herkese açık hale getirmek daha geniş bir inceleme ve iş birliğine davet ediyor.
Sırada Ne Var?
Kriter, GitHub'da açık kaynak lisansı altında şu anda mevcut. Harvey, LAB'ı düzenli olarak güncellemeyi ve hukuki işler geliştikçe yeni görevler eklemeyi planladığını söylüyor. Asıl soru, diğer hukuki yapay zeka şirketlerinin bu kriteri benimseyip benimsemeyeceği veya kendi kriterlerini oluşturup oluşturmayacağı. Yaygın bir kabul olmadan, herhangi bir tek kriterin değeri sınırlıdır. Şimdilik LAB, hukuk sektörüne yapay zeka performansını görev görev ölçmeye başlamak için bir yer sunuyor.
