trace-annotation-tool

Generate a custom local web application for open coding of LLM traces — the first qualitative pass of error analysis in the Analyze phase of the evaluation lifecycle.

fields represent the user query, intermediate steps, tool calls, and final output.

Ask the user: "These are the default features. Do you want anything else before I generate the tool?" Then incorporate any additional requests.

قم بإنشاء تطبيق ويب مخصص لتعليق توضيحي للتتبع للترميز المفتوح أثناء تحليل أخطاء LLM. يُستخدم عندما يريد المستخدم مراجعة آثار LLM، وإضافة تعليقات توضيحية إلى حالات الفشل باستخدام تعليقات حرة، وإجراء وضع العلامات النوعية لأول مرة (الترميز المفتوح). يُستخدم أيضًا عندما يذكر المستخدم "الآثار التوضيحية"، أو "أداة مراجعة التتبع"، أو "أداة الترميز المفتوحة"، أو "آثار التسمية"، أو "إنشاء واجهة تعليق توضيحي"، أو "مراجعة مخرجات LLM"، أو يريد فحص آثار خطوط الأنابيب يدويًا قبل إنشاء تصنيف الفشل. تنتج هذه المهارة تطبيق ويب Python مخصصًا باستخدام FastHTML وTailwindCSS وHTMX. المصدر: maragudk/evals-skills.