Zum Hauptinhalt springen

Lernschleife

Welche Form eine Aussage am besten trägt, steht in einem Leitfaden, den die Plattform fortschreibt. Ein Durchgang nimmt ein Narrativ — einen Satz und die echten Daten, von denen er handelt — und durchläuft diese Stufen:

  1. Profil: Welche Felder haben die Daten, wie viele Werte, welcher Art.
  2. Vorschlag: Ein Modell wählt nach dem Leitfaden die Form und die hervorzuhebenden Elemente.
  3. Darstellung: Die Abbildung wird aus der Datendatei gesetzt. Kann eine Form aus den Daten nicht gefüllt werden, wird sie nicht halb gezeichnet; der Durchgang meldet die Lücke.
  4. Urteil: Ein Modell prüft das gerenderte Bild — nicht den Code — auf fünf Fragen: Ist die Aussage auf einen Blick zu sehen, sind genau ihre Elemente hervorgehoben, ist jede Beschriftung lesbar, sind die Skalen ehrlich, ist die Form die natürliche? Das Urteil des Eigentümers hat Vorrang vor dem des Modells.
  5. Verallgemeinerung: Aus einem misslungenen Fall entsteht eine Regel, formuliert für eine Art von Aussage und eine Art von Daten, nie für den einzelnen Datensatz.
  6. Schranke: Zuerst wird gemessen, was der geltende Leitfaden bei jedem Narrativ zeichnet. Dann zeichnet der Kandidat jedes Narrativ neu. Wo sich die Abbildung ändert, werden die beiden Fassungen nebeneinander beurteilt, in beiden Reihenfolgen; eine Bevorzugung zählt nur, wenn sie die Vertauschung übersteht. Der misslungene Fall muss besser werden, kein anderer schlechter. Eine Gegenprobe verschiebt die Hervorhebung auf Elemente, von denen die Aussage nicht handelt; erkennt das Urteil das nicht, trägt es keine Übernahme.
  7. Übernahme: Erst dann wird die Regel Teil des Leitfadens. Sie geht zugleich als geprüfte Lösung in die gelösten Aufgaben ein. Zurückgezogene Fassungen werden nie wieder gültig.

Die Narrative

  • needle-best: Among the nine retrieval configurations of the needle benchmark, cloudweak with claude-haiku-5-5 reaches the highest strict score.
  • needle-nli-gap: The two NLI configurations lose the most between coarse and strict grading among the non-generative methods, while fnf with claude-haiku-5-5 loses almost nothing.
  • needle-strict-coarse: Every configuration of the needle benchmark scores lower under strict grading than under coarse grading.
  • objid18-cone: The radius of the three day-circles falls steadily with their axial position, as circles cut from one cone must.
  • objid18-hour-steps: Three adjacent hour steps on the equinoctial day-line (intervals 5 to 7) are clearly shorter than the 15° of equal hours; the others lie close to 15°.
  • objid18-step-deviation: The hour steps deviate from the nominal 15° by up to 2°, and only intervals 5 to 7 deviate by more than 1°.

Stand der Lernschleife

7 Durchgänge, davon 5 ohne Befund; 1 Schrankenlauf, 1 bestanden.

Regel Stand
When examining a trend across continuous variables with very few sparse observations, use scatter rather than line to display discrete measurements without implying piecewise interpolation or artificial kinks. übernommen