412 lines
24 KiB
Python
412 lines
24 KiB
Python
"""
|
||
===============================================================================
|
||
FILE: modules/web_api/llm/agent.py
|
||
PROJECT: SCUD Orion AI (Unified Architecture)
|
||
MODULE: web_api / llm (Core Agent Coordinator)
|
||
ROLE: Оркестратор диалога, диспетчер реляционных узлов промпта,
|
||
управление сессионными стейтами, Topic Drift Guard и очистка контекста.
|
||
===============================================================================
|
||
"""
|
||
|
||
# =============================================================================
|
||
# БЛОК 1: ИМПОРТЫ И ИНИЦИАЛИЗАЦИЯ СИСТЕМНЫХ МОДУЛЕЙ
|
||
# =============================================================================
|
||
import sys
|
||
import json
|
||
import logging
|
||
import re
|
||
from typing import List, Dict, Any, Tuple, Optional
|
||
|
||
from .db.connection import get_db_connection
|
||
from .db_tools import (
|
||
db_get_active_system_prompt,
|
||
db_apply_prompt_node_action,
|
||
db_get_tool_action,
|
||
db_get_tasks,
|
||
db_update_task_status,
|
||
db_delete_task,
|
||
db_add_task,
|
||
db_get_rules,
|
||
db_set_session_state,
|
||
db_get_session_state,
|
||
db_clear_session_state,
|
||
db_get_snapshots,
|
||
db_delete_snapshots,
|
||
db_get_current_server_time,
|
||
db_save_chat_message,
|
||
db_get_chat_history,
|
||
db_purge_ephemeral_messages,
|
||
db_get_stats,
|
||
db_get_anomalies,
|
||
db_get_reference
|
||
)
|
||
|
||
from .schemas import TOOLS_SCHEMA
|
||
from .core.calendar_utils import get_dynamic_calendar_context
|
||
from .core.tool_injector import clean_raw_tool_tags, clean_output, inject_tools_if_needed
|
||
from .core.ollama_client import call_ollama_chat
|
||
from .core.fast_path import handle_fast_path_intercept
|
||
|
||
logger = logging.getLogger("SCUD_AGENT")
|
||
logger.setLevel(logging.INFO)
|
||
logger.propagate = False
|
||
|
||
if not logger.handlers:
|
||
handler = logging.StreamHandler(sys.stdout)
|
||
formatter = logging.Formatter("%(asctime)s [%(levelname)s] [%(name)s] %(message)s")
|
||
handler.setFormatter(formatter)
|
||
logger.addHandler(handler)
|
||
|
||
|
||
# =============================================================================
|
||
# БЛОК 2: ГЛАВНЫЙ КОНВЕЙЕР ОБРАБОТКИ СООБЩЕНИЙ ЧАТА
|
||
# =============================================================================
|
||
def process_chat_message(
|
||
user_id: int,
|
||
user_message: str,
|
||
file_context: str = "",
|
||
image_b64: Optional[str] = None,
|
||
chat_history: List[Dict[str, Any]] = None,
|
||
session_id: str = "web_session_main"
|
||
) -> Tuple[str, List[Dict[str, Any]], Optional[Dict[str, Any]]]:
|
||
"""
|
||
Главная функция обработки сообщения:
|
||
1. Очищает осиротевшие эфемерные сообщения.
|
||
2. Перехватывает быстрые кнопки (Fast-Path).
|
||
3. Собирает контекст и передает управление Ollama.
|
||
4. Выполняет Tool Calls и управляет счетчиком Topic Drift.
|
||
"""
|
||
logger.info(f"Получено сообщение от user_id={user_id}, session_id={session_id}: {user_message}")
|
||
|
||
# 🧹 ГАРБАДЖ-КОЛЛЕКТОР: Если стейт сессии пуст, удаляем висящие эфемерные сообщения
|
||
session_state = db_get_session_state(session_id)
|
||
if not session_state:
|
||
db_purge_ephemeral_messages(session_id)
|
||
|
||
full_user_content = f"{user_message}\n\n[СОДЕРЖИМОЕ ПРИКРЕПЛЕННОГО ФАЙЛА]:\n{file_context}" if file_context else user_message
|
||
|
||
# Перехват нажатия кнопок («Подтвердить», «Отменить», «Завершить») без вызова LLM
|
||
fast_path_res = handle_fast_path_intercept(session_id, user_message, full_user_content, session_state)
|
||
if fast_path_res:
|
||
return fast_path_res
|
||
|
||
# Сохранение входящего сообщения оператора
|
||
is_user_ephemeral = 1 if session_state else 0
|
||
db_save_chat_message(session_id, "user", full_user_content, is_ephemeral=is_user_ephemeral)
|
||
db_history = db_get_chat_history(session_id, limit=20)
|
||
|
||
|
||
# =========================================================================
|
||
# БЛОК 3: ДИНАМИЧЕСКАЯ СБОРКА СИСТЕМНОГО ИНСТРУКТАЖА
|
||
# =========================================================================
|
||
dynamic_prompt_text = db_get_active_system_prompt()
|
||
calendar_context = get_dynamic_calendar_context()
|
||
user_info = f"Пользователь ID={user_id}" if user_id != 0 else "Гость"
|
||
|
||
# Извлечение текущего состояния и счетчика отвлечений (idle_turns)
|
||
current_state_type = session_state.get("state_type") if session_state else None
|
||
state_data = session_state.get("data_json") or {} if session_state else {}
|
||
if not isinstance(state_data, dict):
|
||
state_data = {}
|
||
idle_turns = state_data.get("idle_turns", 0)
|
||
|
||
active_state_context = ""
|
||
if current_state_type == "PROMPT_PREVIEW":
|
||
active_state_context = (
|
||
"\n[ВНИМАНИЕ: АКТИВНЫЙ РЕЖИМ ПРЕДПРОСМОТРА ПРОМПТА]\n"
|
||
"- Сейчас открыт предпросмотр изменения системного промпта.\n"
|
||
"- Если пользователь просит изменить, скорректировать формулировку или удалить пункт — вызови инструмент db_prompt_node_edit.\n"
|
||
"- Если пользователь переключился на другую тему — ответь на его вопрос кратко и по делу.\n"
|
||
)
|
||
elif current_state_type == "PROMPT_FOLLOWUP":
|
||
active_state_context = (
|
||
"\n[ВНИМАНИЕ: АКТИВНА СЕССИЯ РЕДАКТИРОВАНИЯ СИСТЕМНОГО ПРОМПТА]\n"
|
||
"- Оператор только что применил предыдущее изменение или запросил просмотр промпта.\n"
|
||
"- Любые команды вида 'добавь X.Y', 'удали X.Y', 'измени X.Y' ОЗНАЧАЮТ ПРОДОЛЖЕНИЕ РАБОТЫ С СИСТЕМНЫМ ПРОМПТОМ -> ВЫЗЫВАЙ db_prompt_node_edit.\n"
|
||
"- Если запрос оператора не ясен или относится к другой теме — ответь на него естественно.\n"
|
||
)
|
||
|
||
system_prompt_content = (
|
||
f"Ты — интеллектуальный ассистент SCUD Orion AI. "
|
||
f"Ты управляешь задачами, аналитикой СКУД и системными настройками с помощью инструментов (tools).\n\n"
|
||
f"СТРОГИЕ ПРАВИЛА СТИЛЯ:\n"
|
||
f"- Запрещено использовать панибратские или шутливые обращения. Отвечай профессионально и строго по существу.\n\n"
|
||
f"[ОКРУЖЕНИЕ]\n"
|
||
f"- Пользователь: {user_info}\n"
|
||
f"- {calendar_context}\n"
|
||
f"{active_state_context}\n"
|
||
f"[ПРАВИЛА ИСПОЛЬЗОВАНИЯ ИНСТРУМЕНТОВ]\n"
|
||
f"1. Для ЛЮБЫХ операций с системным промптом ТЫ ОБЯЗАН СРАЗУ ВЫЗВАТЬ db_prompt_node_edit:\n"
|
||
f" - 'удали 2.9' / 'удалить пункт 2.9' -> ВЫЗОВ db_prompt_node_edit(action='DELETE', section_id=2, item_id=9, content='')\n"
|
||
f" - 'добавь 3.4 Текст' / 'добавить пункт 3.4' -> ВЫЗОВ db_prompt_node_edit(action='ADD', section_id=3, item_id=4, content='Текст')\n"
|
||
f" - 'измени 1.2 Текст' -> ВЫЗОВ db_prompt_node_edit(action='UPDATE', section_id=1, item_id=2, content='Текст')\n"
|
||
f" КАТЕГОРИЧЕСКИ ЗАПРЕЩЕНО отвечать текстом вроде 'Удален пункт... Напишите подтверждаю'. Только Function Call!\n"
|
||
f"2. Для просмотра системного промпта ВСЕГДА вызывай db_get_system_prompt().\n"
|
||
f"3. Для просмотра задач ВСЕГДА вызывай db_get_tasks().\n\n"
|
||
f"[ТЕКУЩИЙ АКТИВНЫЙ СИСТЕМНЫЙ ПРОМПТ]:\n{dynamic_prompt_text}"
|
||
)
|
||
|
||
user_msg_object = {"role": "user", "content": full_user_content}
|
||
|
||
|
||
# =========================================================================
|
||
# БЛОК 4: ВЫЗОВ НЕЙРОСЕТИ И МАРШРУТИЗАЦИЯ FUNCTION CALLING
|
||
# =========================================================================
|
||
try:
|
||
# Режим Vision (OCR)
|
||
if image_b64:
|
||
user_msg_object["images"] = [image_b64]
|
||
messages = [
|
||
{"role": "system", "content": "Ты — строгий модуль OCR. Перепиши весь текст с изображения буква в букву."},
|
||
user_msg_object
|
||
]
|
||
msg = call_ollama_chat(messages, is_vision=True)
|
||
else:
|
||
# Текстовый диалог
|
||
clean_db_history = [dict(m) for m in db_history]
|
||
for m in clean_db_history:
|
||
m.pop("images", None)
|
||
messages = [{"role": "system", "content": system_prompt_content}] + clean_db_history + [user_msg_object]
|
||
msg = call_ollama_chat(messages, tools=TOOLS_SCHEMA, is_vision=False)
|
||
|
||
raw_text_reply = msg.get("content", "")
|
||
tool_calls = msg.get("tool_calls", [])
|
||
tool_calls = inject_tools_if_needed(user_message, raw_text_reply, tool_calls)
|
||
|
||
# Исполнение вызванных моделью инструментов
|
||
if tool_calls:
|
||
logger.info(f"Ответ от Ollama получен. Tool calls: True (кол-во: {len(tool_calls)})")
|
||
messages.append(msg)
|
||
tool_names_called = []
|
||
|
||
# -----------------------------------------------------------------
|
||
# TOPIC DRIFT GUARD ДЛЯ ИНСТРУМЕНТОВ:
|
||
# Если вызваны сторонние инструменты (снапшоты, задачи, статы)
|
||
# — мгновенно закрываем сессию и вычищаем эфемерный контекст
|
||
# -----------------------------------------------------------------
|
||
is_prompt_tool = any(t["function"]["name"] in ["db_prompt_node_edit", "db_get_system_prompt", "db_get_system_prompts"] for t in tool_calls)
|
||
if not is_prompt_tool and session_state:
|
||
logger.info(f"Смена темы на инструмент {tool_calls[0]['function']['name']}. Закрываем сессию и очищаем эфемерный контекст.")
|
||
db_clear_session_state(session_id)
|
||
db_purge_ephemeral_messages(session_id)
|
||
session_state = None
|
||
|
||
for tool in tool_calls:
|
||
fn_name = tool["function"]["name"]
|
||
fn_args = tool["function"].get("arguments", {})
|
||
tool_names_called.append(fn_name)
|
||
logger.info(f"Вызов функции (Tool): {fn_name} с аргументами: {fn_args}")
|
||
tool_result_content = ""
|
||
|
||
# --- 4.1. Модуль задач ---
|
||
if fn_name == "db_get_tasks":
|
||
raw_tasks = db_get_tasks(user_id)
|
||
reply_text = "Вот интерактивный список ваших текущих задач:"
|
||
db_save_chat_message(session_id, "assistant", reply_text, is_ephemeral=1)
|
||
return reply_text, db_get_chat_history(session_id), {
|
||
"type": "TASK_INTERACTIVE_CARD",
|
||
"tasks": raw_tasks
|
||
}
|
||
|
||
# --- 4.2. Прямой просмотр системного промпта из SQLite ---
|
||
elif fn_name in ["db_get_system_prompt", "db_get_system_prompts"]:
|
||
active_prompt = db_get_active_system_prompt()
|
||
reply_text = f"Актуальный системный промпт:\n\n{active_prompt}"
|
||
|
||
# Переводим сессию в PROMPT_FOLLOWUP для отслеживания Topic Drift
|
||
db_set_session_state(session_id, "PROMPT_FOLLOWUP", {"idle_turns": 0})
|
||
db_save_chat_message(session_id, "assistant", reply_text, is_ephemeral=1)
|
||
return reply_text, db_get_chat_history(session_id), None
|
||
|
||
# --- 4.3. Реляционное изменение промпта (ADD / UPDATE / DELETE) ---
|
||
elif fn_name == "db_prompt_node_edit":
|
||
action = fn_args.get("action", "ADD").upper()
|
||
sec_id = int(fn_args.get("section_id", 2))
|
||
itm_id = int(fn_args.get("item_id", 1))
|
||
content = fn_args.get("content", "").strip()
|
||
baseline_prompt = db_get_active_system_prompt()
|
||
|
||
with get_db_connection() as temp_conn:
|
||
temp_cursor = temp_conn.cursor()
|
||
temp_cursor.execute("""
|
||
SELECT section_id, item_id, content
|
||
FROM system_prompt_nodes
|
||
WHERE prompt_name = 'main_agent' AND is_active = 1
|
||
ORDER BY section_id, item_id
|
||
""")
|
||
existing_nodes = temp_cursor.fetchall()
|
||
|
||
nodes_dict = {(sec, itm): txt for sec, itm, txt in existing_nodes}
|
||
|
||
if action == "DELETE":
|
||
nodes_dict_for_draft = {k: v for k, v in nodes_dict.items() if k != (sec_id, itm_id)}
|
||
else:
|
||
nodes_dict_for_draft = dict(nodes_dict)
|
||
nodes_dict_for_draft[(sec_id, itm_id)] = content
|
||
|
||
# Формирование чистого текста для редактора
|
||
draft_lines = []
|
||
curr_sec = None
|
||
for (s_id, i_id), txt in sorted(nodes_dict_for_draft.items()):
|
||
if i_id == 0:
|
||
if curr_sec is not None:
|
||
draft_lines.append("")
|
||
draft_lines.append(f"{s_id}. {txt}")
|
||
curr_sec = s_id
|
||
else:
|
||
draft_lines.append(f" {s_id}.{i_id}. {txt}")
|
||
merged_prompt = "\n".join(draft_lines)
|
||
|
||
# Формирование HTML Diff с подсветкой
|
||
diff_lines = []
|
||
curr_sec = None
|
||
display_nodes = dict(nodes_dict)
|
||
if action != "DELETE":
|
||
display_nodes[(sec_id, itm_id)] = content
|
||
|
||
for (s_id, i_id), txt in sorted(display_nodes.items()):
|
||
if i_id == 0:
|
||
if curr_sec is not None:
|
||
diff_lines.append("")
|
||
diff_lines.append(f"{s_id}. {txt}")
|
||
curr_sec = s_id
|
||
else:
|
||
if s_id == sec_id and i_id == itm_id:
|
||
if action == "DELETE":
|
||
line_str = f' <span class="line-through text-rose-600 font-bold bg-rose-50 px-1.5 py-0.5 rounded border border-rose-300 opacity-80">{s_id}.{i_id}. {txt} [УДАЛЕНИЕ]</span>'
|
||
else:
|
||
line_str = f' <span class="text-rose-600 font-bold bg-rose-50 px-1.5 py-0.5 rounded border border-rose-300">{s_id}.{i_id}. {txt}</span>'
|
||
else:
|
||
line_str = f" {s_id}.{i_id}. {txt}"
|
||
diff_lines.append(line_str)
|
||
|
||
diff_html = "\n".join(diff_lines)
|
||
|
||
# Фиксация предпросмотра в session_states
|
||
db_set_session_state(session_id, "PROMPT_PREVIEW", {
|
||
"draft_text": merged_prompt,
|
||
"action": action,
|
||
"section_id": sec_id,
|
||
"item_id": itm_id,
|
||
"content": content,
|
||
"idle_turns": 0
|
||
})
|
||
|
||
with get_db_connection() as conn_fix:
|
||
conn_fix.cursor().execute("""
|
||
UPDATE chat_messages
|
||
SET is_ephemeral = 1
|
||
WHERE id = (SELECT MAX(id) FROM chat_messages WHERE session_id = ? AND role = 'user')
|
||
""", (session_id,))
|
||
conn_fix.commit()
|
||
|
||
preview_reply = (
|
||
f"Предпросмотр изменений системного промпта:\n\n"
|
||
f"{diff_html}\n\n"
|
||
f"Для применения подтвердите действие, отредактируйте или отмените."
|
||
)
|
||
|
||
db_save_chat_message(session_id, "assistant", preview_reply, is_ephemeral=1)
|
||
return preview_reply, db_get_chat_history(session_id), {
|
||
"type": "PROMPT_PREVIEW",
|
||
"raw_draft": merged_prompt,
|
||
"baseline_prompt": baseline_prompt,
|
||
"buttons": [
|
||
{"label": "Подтвердить", "value": "подтверждаю", "style": "primary"},
|
||
{"label": "Отменить", "value": "отмена", "style": "danger"},
|
||
{"label": "✏️ Редактировать", "value": "action:open_editor", "style": "secondary"}
|
||
]
|
||
}
|
||
|
||
# --- 4.4. Сервисные инструменты ---
|
||
elif fn_name == "db_get_snapshots":
|
||
snapshots_res = db_get_snapshots(session_id=session_id, date_str=fn_args.get("date_str"), original_user_message=user_message)
|
||
tool_result_content = json.dumps(snapshots_res, ensure_ascii=False)
|
||
|
||
elif fn_name == "db_get_current_server_time":
|
||
tool_result_content = json.dumps(db_get_current_server_time(), ensure_ascii=False)
|
||
|
||
elif fn_name == "db_get_stats":
|
||
tool_result_content = json.dumps(db_get_stats(), ensure_ascii=False)
|
||
|
||
elif fn_name == "db_get_anomalies":
|
||
tool_result_content = json.dumps(db_get_anomalies(limit=fn_args.get("limit", 100), date_str=fn_args.get("date_str")), ensure_ascii=False)
|
||
|
||
elif fn_name == "db_get_rules":
|
||
tool_result_content = json.dumps(db_get_rules(), ensure_ascii=False)
|
||
|
||
elif fn_name == "db_get_reference":
|
||
tool_result_content = json.dumps(db_get_reference(category=fn_args.get("category")), ensure_ascii=False)
|
||
|
||
elif fn_name == "db_add_task":
|
||
res = db_add_task(user_id=user_id, module=fn_args.get("module", "general"), title=fn_args.get("title"), priority=fn_args.get("priority", "MEDIUM"), due_date=fn_args.get("due_date"))
|
||
tool_result_content = json.dumps(res, ensure_ascii=False)
|
||
|
||
elif fn_name == "db_update_task_status":
|
||
res = db_update_task_status(user_id=user_id, task_id=str(fn_args.get("task_id")), status=fn_args.get("status", "COMPLETED"), due_date=fn_args.get("due_date"))
|
||
tool_result_content = json.dumps(res, ensure_ascii=False)
|
||
|
||
elif fn_name == "db_delete_task":
|
||
res = db_delete_task(user_id=user_id, task_id=str(fn_args.get("task_id", "")).upper())
|
||
tool_result_content = json.dumps(res, ensure_ascii=False)
|
||
|
||
elif fn_name == "db_delete_snapshots":
|
||
res = db_delete_snapshots(snapshot_id=fn_args.get("snapshot_id"), day_str=fn_args.get("day_str"))
|
||
tool_result_content = json.dumps(res, ensure_ascii=False)
|
||
|
||
messages.append({"role": "tool", "content": tool_result_content})
|
||
|
||
# Интерпретация результатов вызова инструментов
|
||
sec_msg = call_ollama_chat(messages, is_vision=False)
|
||
raw_content = sec_msg.get("content", "").strip().replace("**", "").replace("*", "")
|
||
final_content = clean_raw_tool_tags(clean_output(raw_content))
|
||
|
||
is_output_ephemeral = 1 if any(name in ["db_get_system_prompt", "db_get_system_prompts", "db_prompt_node_edit"] for name in tool_names_called) else 0
|
||
|
||
db_save_chat_message(session_id, "assistant", final_content, is_ephemeral=is_output_ephemeral)
|
||
return final_content, db_get_chat_history(session_id), None
|
||
|
||
|
||
# =====================================================================
|
||
# БЛОК 5: ОБЫЧНЫЙ ТЕКСТОВЫЙ ОТВЕТ И СЕМАНТИЧЕСКИЙ TOPIC DRIFT GUARD
|
||
# =====================================================================
|
||
raw_str = msg.get("content", "").strip().replace("**", "").replace("*", "")
|
||
final_reply = clean_raw_tool_tags(clean_output(raw_str)) or "Запрос обработан."
|
||
action_payload = None
|
||
|
||
# Обработка отвлечений оператора при активной сессии настройки/просмотра
|
||
if session_state and session_state.get("state_type") in ["PROMPT_FOLLOWUP", "PROMPT_PREVIEW"]:
|
||
idle_turns += 1
|
||
logger.info(f"Topic Drift: активна сессия {session_state.get('state_type')}, шагов отвлечения: {idle_turns}/3")
|
||
|
||
# Порог отвлечений превышен (> 2 шагов после напоминания) -> Полная зачистка
|
||
if idle_turns > 3:
|
||
db_clear_session_state(session_id)
|
||
deleted_count = db_purge_ephemeral_messages(session_id)
|
||
logger.info(f"Topic Drift Guard TTL: сессия закрыта по таймауту, очищено {deleted_count} сообщений.")
|
||
action_payload = None
|
||
session_state = None
|
||
elif idle_turns == 3:
|
||
# На 3-м сообщении стороннего диалога вежливо спрашиваем оператора
|
||
tool_action = db_get_tool_action("db_confirm_prompt_preview")
|
||
guard_question = tool_action.get("follow_up_question", "Желаете продолжить работу с системным промптом?") if tool_action else "Желаете продолжить работу с системным промптом?"
|
||
buttons = tool_action.get("buttons", []) if tool_action else []
|
||
|
||
final_reply += f"\n\n💡 *Напоминание:* {guard_question}"
|
||
action_payload = {
|
||
"type": "PROMPT_FOLLOWUP",
|
||
"buttons": buttons
|
||
}
|
||
db_set_session_state(session_id, "PROMPT_FOLLOWUP", {"idle_turns": idle_turns})
|
||
else:
|
||
# Шаги 1 и 2: продолжаем обычный диалог, инкрементируя счетчик
|
||
db_set_session_state(session_id, session_state.get("state_type"), {"idle_turns": idle_turns})
|
||
|
||
db_save_chat_message(session_id, "assistant", final_reply, is_ephemeral=(1 if session_state else 0))
|
||
return final_reply, db_get_chat_history(session_id), action_payload
|
||
|
||
# Обработка исключений
|
||
except Exception as ex:
|
||
logger.exception(f"Непредвиденная ошибка агента: {ex}")
|
||
error_reply = f"Внутренняя ошибка сервера: {ex}"
|
||
return error_reply, db_get_chat_history(session_id), None |