JOGI AI
SwiLTra-Bench: Többnyelvű benchmark a svájci jogi fordításokhoz
Ön svájci jogi szakember? Szeretné tudni, hogyan teljesítenek az AI rendszerek az Ön egyedi környezetében, ahol párhuzamos fordításokra van szükség német, francia, olasz és (néha) romans nyelven? Ha igen, van egy nagyszerű adatkészletem és eredménylistám az Ön számára! A Harvey, az ETH Zurich, a Svájci Szövetségi Legfelsőbb Bíróság és több neves egyetem kutatói létrehozták a SwiLTra-Bench-et, amely egy átfogó, többnyelvű benchmark több mint 180 ezer svájci jogi fordítási párral. Az adatkészlet törvényeket, jogeset-összefoglalókat és sajtóközleményeket tartalmaz az összes svájci nyelven, valamint angolul, és az LLM-alapú fordítórendszerek értékelésére tervezték. Eredmények: Általában a zárt forráskódú AI modellek túlszárnyalják a többi modellt – beleértve az ezen az adatkészleten finomhangolt nyílt modelleket is. Összességében a törvények és az összefoglalók fordításában is a Claude 3.5 Sonnet a legjobb modell, amelyet az o1 követ.
- Svájci jogi fordítások: Teljes jogi dokumentumokat, egyes cikkelyeket és bekezdéseket tartalmaz.
- Jogeset-összefoglalók: A Svájci Legfelsőbb Bíróság mérföldkőnek számító döntéseinek fordításai német, francia és olasz nyelven.
- Sajtóközlemények: A Svájci Legfelsőbb Bíróság közleményeinek fordításai.
- Támogatott nyelvek: Német, francia, olasz, romans és angol.
Miért fontos?
A SwiLTra az AI elterjedésének egyik jele: az ilyen adatkészletek rávilágítanak arra, hogyan használják az AI-t globálisan egyre szélesebb körű feladatokra. A SwiLTra létezése egyúttal „igényjelzés” a generatív modellek svájci jogi munkafolyamatokban való alkalmazására. ---