Agents.py 9.2 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260
  1. import os
  2. from typing import Annotated, Sequence, TypedDict, Optional , List
  3. from dotenv import load_dotenv
  4. from langchain_openai import ChatOpenAI
  5. from langchain_core.messages import BaseMessage, HumanMessage, SystemMessage , AIMessage , ToolMessage
  6. from langgraph.graph.message import add_messages
  7. from langchain_groq import ChatGroq
  8. from langfuse import get_client
  9. import pandas as pd
  10. from langfuse.langchain import CallbackHandler
  11. import json
  12. from langchain_community.chat_models import ChatOllama
  13. # Initialize Langfuse CallbackHandler for Langchain (tracing)
  14. langfuse_handler = CallbackHandler()
  15. # Import de tes outils corrigés
  16. from tools import excel_code_interpreter, search_tool , inspect_data , call_tool_and_format_for_ollama , robust_json_parse
  17. langfuse = get_client()
  18. load_dotenv()
  19. # 1. Définition du State
  20. class AgentState(TypedDict):
  21. messages: Annotated[Sequence[BaseMessage], add_messages]
  22. current_df_path: Optional[str]
  23. Data_colomns: Optional[str]
  24. generated_charts : List[str]
  25. # 2. Configuration du Modèle et des Outils
  26. #model =ChatGroq(model="llama-3.3-70b-versatile")
  27. #model_llama=ChatGoogleGenerativeAI(model="gemini-2.5-flash")
  28. #model_gpt = ChatOpenAI(model="gpt-5.3-codex" )
  29. #model_gpt_5 = ChatOpenAI(model="o4-mini" )
  30. tools = [ search_tool , excel_code_interpreter, inspect_data ]
  31. # Local LLM :
  32. from langchain_experimental.llms.ollama_functions import OllamaFunctions
  33. from langchain_community.chat_models import ChatOllama
  34. OLLAMA_BASE_URL = os.getenv("OLLAMA_URL", "http://localhost:11434")
  35. local_llm = ChatOllama(
  36. model="deepseek-coder-v2:16b-lite-instruct-q4_K_M",
  37. base_url=OLLAMA_BASE_URL,
  38. format="json",
  39. temperature=0
  40. )
  41. local_llm_fonction = OllamaFunctions(
  42. model="deepseek-coder-v2:16b-lite-instruct-q4_K_M",
  43. #model="llama3.1:8b",
  44. temperature=0,
  45. format="json",
  46. num_ctx=4096
  47. )
  48. local_llm_reporter = ChatOllama(
  49. model="llama3.1:8b",
  50. temperature=0,
  51. )
  52. model_with_tools = local_llm_fonction.bind_tools(tools)
  53. def agent_analyseur(state: AgentState):
  54. import os
  55. import pandas as pd
  56. # 1. PHASE D'INSPECTION (Identique)
  57. file_path = state.get("current_df_path")
  58. inspection_info = "Aucun fichier détecté."
  59. columns_list = []
  60. if file_path and os.path.exists(file_path):
  61. try:
  62. df_temp = pd.read_csv(file_path, nrows=5) if file_path.endswith('.csv') else pd.read_excel(file_path, nrows=5)
  63. columns_list = df_temp.columns.tolist()
  64. sample_data = df_temp.head(2).to_string()
  65. inspection_info = (
  66. f"COLONNES EXACTES : {columns_list}\n"
  67. f"APERÇU DES DONNÉES :\n{sample_data}"
  68. )
  69. except Exception as e:
  70. inspection_info = f"⚠️ Erreur lors de l'inspection : {e}"
  71. # 2. RÉCUPÉRATION DE LA QUERY
  72. user_query = state["messages"][-1].content if state["messages"] else "Pas de question."
  73. # 3. CONSTRUCTION DU PROMPT DYNAMIQUE (Comme l'Exécuteur)
  74. # On définit les règles métier ici
  75. prompt = (
  76. "### SYSTEM ROLE ###\n"
  77. "Tu es l'Analyseur de Dataltist. Ton rôle est de créer un plan d'action logique.\n"
  78. "Tu dois répondre EXCLUSIVEMENT au format JSON.\n\n"
  79. "### DONNÉES DISPONIBLES ###\n"
  80. f"{inspection_info}\n\n"
  81. "### RÈGLES CRITIQUES ###\n"
  82. "1. PAS DE CODE : Ne génère jamais de Python.\n"
  83. f"2. COLONNES : Utilise uniquement {columns_list}.\n"
  84. "3. PLAN : Détaille les étapes (Somme, Moyenne, Regroupement, etc.).\n\n"
  85. "### STRUCTURE JSON ATTENDUE ###\n"
  86. "{\n"
  87. " \"plan\": [\"étape 1\", \"étape 2\"],\n"
  88. " \"colonnes_utilisees\": [\"col1\", \"col2\"]\n"
  89. "}\n"
  90. )
  91. #
  92. # 4. PRÉPARATION DU MESSAGE UNIQUE (La méthode qui marche pour l'Exécuteur)
  93. # On fusionne le prompt et la question utilisateur dans un seul HumanMessage
  94. full_input = f"{prompt}\n\n### QUESTION UTILISATEUR ###\n{user_query}"
  95. final_messages = [HumanMessage(content=full_input)]
  96. config_analyseur = {
  97. "callbacks": [langfuse_handler],
  98. "metadata": {"agent_name": "Analyseur"}
  99. }
  100. # 5. APPEL DU MODÈLE
  101. # Note : On utilise local_llm (ou analyseur_llm si tu as séparé)
  102. response = local_llm_chat.invoke(final_messages, config=config_analyseur)
  103. return {"messages": [response]}
  104. def agent_executor(state: AgentState):
  105. # On récupère le nom exact du fichier depuis le state
  106. full_path = state.get("current_df_path") or "data/default.csv"
  107. file_name = os.path.basename(full_path) # Récupère 'mon_fichier.csv'
  108. # On construit le prompt en injectant le nom dynamiquement
  109. prompt = (
  110. "### SYSTEM ROLE ###\n"
  111. "Tu es un moteur d'exécution Python. Réponds EXCLUSIVEMENT au format JSON.\n\n"
  112. "### FICHIER ACTUEL ###\n"
  113. f"Fichier : '{file_name}' | Chemin : 'data/{file_name}'\n\n"
  114. "### INSTRUCTIONS DE CODE & SÉCURITÉ ###\n"
  115. "1. Imports : pandas, matplotlib.pyplot.\n"
  116. f"2. Chargement : df = pd.read_csv('data/{file_name}')\n"
  117. "3. SYNTAXE (Apostrophes) : Utilise TOUJOURS des doubles guillemets (\"\") pour les labels.\n\n"
  118. "4. GRAPHIQUES (SAUVEGARDE) :\n"
  119. " - INTERDIT : plt.show()\n"
  120. " - OBLIGATOIRE : plt.savefig('outputs/nom_du_graphe.png')\n\n"
  121. "5. DATA REPORTING (CRUCIAL POUR LE REPORTER) :\n"
  122. " - AVANT de générer le graphique, calcule les stats clés (Somme, Moyenne, Top 3).\n"
  123. " - Utilise print() pour afficher ces chiffres afin que le Reporter les reçoive.\n\n"
  124. "6. VARIABLE 'result' :\n"
  125. " - Termine ton code par une variable 'result' qui récapitule :\n"
  126. " 1. Les fichiers générés (ex: 'outputs/ventes.png')\n"
  127. " 2. Un résumé textuel des chiffres affichés par les graphiques.\n\n"
  128. "### EXEMPLE DE CODE INTERNE ATTENDU ###\n"
  129. "import pandas as pd\n"
  130. "import matplotlib.pyplot as plt\n"
  131. "df = pd.read_csv('...')\n"
  132. "stats = df.groupby('Pays')['Ventes'].sum()\n"
  133. "print(stats) # <--- Ceci permet au Reporter de voir les chiffres !\n"
  134. "plt.bar(stats.index, stats.values)\n"
  135. "plt.savefig('outputs/ventes_pays.png')\n"
  136. "result = f\"Graphique 'ventes_pays.png' généré. Chiffres clés : {stats.to_dict()}\"\n"
  137. )
  138. # Nettoyage des messages pour Ollama (comme avant)
  139. cleaned_messages = []
  140. for m in state["messages"]:
  141. if m.type == "tool":
  142. cleaned_messages.append(HumanMessage(content=f"Résultat : {m.content}"))
  143. else:
  144. cleaned_messages.append(m)
  145. # On place le prompt dynamique en premier
  146. final_messages = [HumanMessage(content=prompt)] + cleaned_messages
  147. return {"messages": [model_with_tools.invoke(final_messages)]}
  148. def agent_reporter(state : AgentState) :
  149. prompt_reporter = (
  150. ### RÔLE ###
  151. """ Tu es un Expert Consultant en Data Visualisation et Analyse Statistique.
  152. Ton objectif est de transformer des données techniques brutes en un rapport stratégique clair, élégant et actionnable.
  153. ### DIRECTIVES DE RÉDACTION ###
  154. 1. INTERPRÉTATION : Ne te contente pas de citer les chiffres. Explique ce qu'ils signifient Utilise correctement les chiffres retournés par les outils : assure-toi de bien les comprendre et de les avoir triés.
  155. 2. STRUCTURE : Utilise des titres (##), du gras (**), et des listes à puces pour la clarté.
  156. 3. VISUELS : Mentionne les graphiques générés avec l'émoji 📊.
  157. 4. TON : Professionnel, dynamique et rassurant.
  158. 5. PAS DE JSON : Ta réponse doit être uniquement du texte formaté en Markdown.
  159. ### STRUCTURE DU RAPPORT ###
  160. ## 📝 Synthèse de l'Analyse
  161. (Un paragraphe fluide qui résume la situation globale).
  162. ## 💡 Points Clés & Insights
  163. - **[Point 1]** : Explication...
  164. - **[Point 2]** : Explication...
  165. ## 📊 Visualisations Disponibles
  166. - [Nom du fichier.png] : Brève description de ce que le graphique démontre.
  167. ## 🚀 Recommandations si tu n'as
  168. (Une ou deux phrases sur la prochaine étape suggérée)."""
  169. )
  170. all_messages = state["messages"]
  171. # On ne garde que :
  172. # 1. Le premier message (User) pour le contexte
  173. # 2. Le DERNIER message de l'IA (le code qui a marché)
  174. # 3. Le DERNIER message de l'outil (les données réelles)
  175. important_messages = [
  176. all_messages[0], # La question de l'utilisateur
  177. [m for m in all_messages if isinstance(m, AIMessage)][-1], # Le dernier code
  178. [m for m in all_messages if isinstance(m, ToolMessage)][-1] # Le dernier résultat
  179. ]
  180. # Nettoyage des messages pour Ollama (comme avant)
  181. cleaned_messages = []
  182. for m in important_messages :
  183. if m.type == "tool":
  184. cleaned_messages.append(HumanMessage(content=f"Résultat : {m.content}"))
  185. else:
  186. cleaned_messages.append(m)
  187. # On place le prompt dynamique en premier
  188. final_messages = [HumanMessage(content=prompt_reporter)] + cleaned_messages
  189. return {"messages": [local_llm_reporter.invoke(final_messages)]}