جمع البيانات: المسارات وإعادة تشغيل التتبعات

البيانات هي المنتج

كيف يبدو مسار تنفيذ الوكيل

trajectory = {
    'task': 'Refactor the auth module',
    'messages': [
        {'role': 'system', 'content': '...'},
        {'role': 'user', 'content': 'Task...'},
        {'role': 'assistant', 'content': 'Plan...', 'tool_calls': [...]},
        {'role': 'tool', 'content': '...'},
        ...
    ],
    'outcome': 'success'
}

استخراج سجلات التنفيذ من الإنتاج

for trace in production_traces:
    if trace.outcome == 'success' and trace.user_feedback == 'thumbs_up':
        save_to_training_set(trace)

إعادة تشغيل سجل التنفيذ

def replay(trace):
    messages = trace.messages[:1]   # just the initial user msg
    for expected_msg in trace.messages[1:]:
        actual = agent.step(messages)
        if actual.role == 'assistant':
            messages.append(actual)
        elif expected_msg.role == 'tool':
            messages.append(expected_msg)   # replay tool result

تصفية سجلات التنفيذ عالية الجودة

التقطير من النماذج الكبيرة

for task in task_list:
    traj = big_model_agent.run(task)
    if traj.success:
        save_for_training(traj)

# Now fine-tune Llama 8B on the GPT-4o traces.

استبعاد مسارات التنفيذ السيئة

تنسيق الضبط الدقيق

{"messages": [{"role": "system", "content": "..."}, {"role": "user", "content": "..."}, {"role": "assistant", "content": "..."}]}
{"messages": [...]}

استدعاءات الأدوات في بيانات التدريب

{
  "messages": [
    {"role": "user", "content": "Weather in Paris?"},
    {"role": "assistant", "tool_calls": [{...}]},
    {"role": "tool", "tool_call_id": "...", "content": "{...}"},
    {"role": "assistant", "content": "It is 18C and sunny."}
  ]
}

الأمثلة السلبية

preferences = [
    {'prompt': '...', 'chosen': good_response, 'rejected': bad_response}
]

حاسبة حجم مجموعة البيانات

إدارة إصدارات مجموعة البيانات

تنظيم البيانات بمشاركة بشرية

أفضل مصدر لسجلات التنفيذ

مراجعة