Improved video referencing WIP (codex)

prompts/reference_resolver.md

@@ -15,19 +15,24 @@
   таблицу, рисунок, объект или демонстрацию;
 - в `description` кратко и фактически опиши полезное содержимое выбранного
   кадра;
-- верни `ocr_text: null`.
+- верни `crop_box: null`.
 
 Для `ocr`:
 
-- выбери один кадр, на котором нужный текст виден достаточно полно и чётко;
-- точно перепиши только относящийся к запросу текст или формулу;
-- не исправляй и не дополняй распознанное по собственным знаниям;
-- сохрани обозначения, индексы, знаки и порядок элементов;
+- пока не переписывай текст: выбери один кадр, на котором присутствуют все
+  запрошенные элементы;
+- укажи охватывающую их прямоугольную область как `crop_box` в формате
+  `[y_min, x_min, y_max, x_max]`, где координаты нормализованы от 0 до 1000;
+- область должна включать весь относящийся к запросу текст или формулу и
+  небольшой окружающий контекст;
 - верни `description: null`.
 
-Не считай совпадением кадр, если содержимое не видно, обрезано, слишком мелкое
-или лишь предположительно соответствует запросу. Не используй текст запроса,
-чтобы выдумать отсутствующее содержимое.
+Для `vis` не считай совпадением кадр, если содержимое не видно, обрезано,
+слишком мелкое или лишь предположительно соответствует запросу. Для `ocr`
+мелкий текст допустим: сейчас нужно уверенно найти содержащую его область, а
+читать её будет следующий этап после увеличения. Не выбирай `ocr`-кадр, если
+нужная область отсутствует, обрезана, закрыта или её нельзя уверенно найти.
+Не используй текст запроса, чтобы выдумать отсутствующее содержимое.
 
 Если подходят несколько кадров, выбери самый полный и читаемый.
 
@@ -37,7 +42,7 @@
   "matched": true,
   "image_number": 2,
   "description": "Схема системы управления с входным и выходным векторами.",
-  "ocr_text": null
+  "crop_box": null
 }
 
 Для успешного `ocr`:
@@ -46,7 +51,7 @@
   "matched": true,
   "image_number": 1,
   "description": null,
-  "ocr_text": "ρ(F_E, F̄) < ε"
+  "crop_box": [180, 240, 720, 810]
 }
 
 Если ни один кадр не подходит:
@@ -55,7 +60,7 @@
   "matched": false,
   "image_number": null,
   "description": null,
-  "ocr_text": null
+  "crop_box": null
 }
 
 Не добавляй Markdown, комментарии или текст до и после JSON.