الملخص
تمت ترجمة أجزاء من هذه الصفحة آلياً وقد تحتوي على أخطاء.
Structured span annotations, such as quantities with their units, uncertainty modifiers, and event classes, are expensive to create and hard to keep trustworthy once language models enter the loop. We present QuanReview, an open-source system for auditing and correcting such annotation layers. QuanReview aligns two annotation streams over the same documents at character level, resolves unambiguous cases by an explicit and logged policy, and routes candidate conflicts to a browser-based adjudication interface where reviewers accept either side, build field-level hybrids, or flag items for re-annotation. A campaign manager assigns documents to multiple annotators with configurable redundancy, computes agreement at document and span level, auto-merges unanimous documents, and exports the corrected layer in the original file format, so that it can replace the original annotation files directly. Applied to a 4,457-record humanitarian benchmark and an LLM extraction stream, the system fully auto-merged 8% of documents, applied automatic policy decisions to a further 1,513 records, and concentrated human attention on 3,131 candidate conflicts, a mean of 5.4 per reviewed document.
الكلمات المفتاحية
الموضوع
بيانات النشر
- المجلة
- غير متاح
- وصول مفتوح
- وصول مفتوح أخضر
اقتبس هذه المقالة
APA 7
Musacchio, M., Pulero, J. C. G., Castañeda, I., Couriel, N., Mejova, Y., Beiró, M. G., & Kalimeri, K. (2026). QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة. https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations
MLA 9
Musacchio, Matteo, et al. "QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة." https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations.
شيكاغو (المؤلف–التاريخ)
Musacchio, Matteo, Juan Cruz Giner Pulero, Isabel Castañeda, Naomi Couriel, Yelena Mejova, Mariano G. Beiró, and Kyriaki Kalimeri. 2026. "QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة." https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations.
هارفارد
Musacchio, M., Pulero, J. C. G., Castañeda, I., Couriel, N., Mejova, Y., Beiró, M. G. and Kalimeri, K. (2026) 'QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة', Available at: https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations.
فانكوفر
Musacchio M, Pulero JCG, Castañeda I, Couriel N, Mejova Y, Beiró MG, et al. QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة. https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations
IEEE
M. Musacchio, J. C. G. Pulero, I. Castañeda, N. Couriel, Y. Mejova, M. G. Beiró, and K. Kalimeri, "QuanReview: مواءمة قابلة للتدقيق وغير متصلة لشروح الفترات البشرية وشروح النماذج اللغوية الكبيرة," https://omanscience.com/ar/articles/quanreview-offline-auditable-reconciliation-of-human-and-llm-span-annotations.