Интеграция LLM с LangChain
Научитесь подключать различных поставщиков LLM, например OpenAI и Hugging Face, к агентам LangChain
«Интеграция LLM с LangChain» — бесплатный урок AI Agents with LangChain & Autonomous Workflows на CoddyKit. Это урок 2 из 4. Ты можешь прочитать весь урок бесплатно ниже — а потом практиковать его прямо в браузере с встроенным редактором кода и ИИ-репетитором 24/7. Это часть пути обучения AI Agents with LangChain & Autonomous Workflows, и твой прогресс синхронизируется между веб-версией и приложением CoddyKit. Курс AI Agents with LangChain & Autonomous Workflows содержит 4 уроков всего.
Части этого урока еще не переведены и отображаются на английском.
Connect Your AI Brains
Imagine your AI agent as a chef. Sometimes they need a specific ingredient (an LLM) for a dish. LangChain lets your agent switch between different LLMs, like having a pantry full of options!
Why is this useful?
- Flexibility: Use the best model for each task.
- Cost: Optimize spending by using cheaper models for simple tasks.
- Performance: Access cutting-edge models as they emerge.
LangChain's Unified Interface
LangChain acts as a universal adapter for Large Language Models (LLMs). Instead of learning a new way to interact with each LLM provider, you learn one LangChain way.
It provides a consistent interface, whether you're talking to OpenAI's GPT models or a model from Hugging Face. This makes your code cleaner and easier to manage.
Integrating OpenAI Models
OpenAI offers powerful LLMs like GPT-3.5 and GPT-4. To use them with LangChain, you'll need an OpenAI API key.
Remember to keep your API key secret! You'll typically set it as an environment variable to avoid hardcoding it in your code.
Before we start, install the necessary library:
pip install langchain-openaiOpenAI Chat Model in Action
Here's how to connect to an OpenAI chat model and get a response. We'll use the ChatOpenAI class, which is optimized for conversational interactions.
Try running this example (ensure OPENAI_API_KEY is set in your environment):
import os
from langchain_openai import ChatOpenAI
from langchain_core.messages import HumanMessage
# Set your OpenAI API key as an environment variable
# os.environ["OPENAI_API_KEY"] = "YOUR_API_KEY_HERE"
# Initialize the chat model
# model_name can be "gpt-3.5-turbo", "gpt-4", etc.
chat = ChatOpenAI(model_name="gpt-3.5-turbo")
# Invoke the model with a simple message
response = chat.invoke([
HumanMessage(content="What is the capital of France?")
])
# Print the model's response
print(response.content)Connecting Hugging Face Models
Hugging Face is a hub for open-source AI models. LangChain allows you to easily integrate models hosted on the Hugging Face Hub or even run local models.
You'll need a Hugging Face API token for models hosted on their Inference API. Get one from your Hugging Face profile settings.
Install the required library:
pip install langchain-huggingfaceHugging Face Hub in Action
Let's use a text generation model from the Hugging Face Hub. We'll use the HuggingFaceHub class, specifying a model repository ID.
Try running this example (ensure HUGGINGFACEHUB_API_TOKEN is set):
import os
from langchain_huggingface import HuggingFaceHub
# Set your Hugging Face API token as an environment variable
# os.environ["HUGGINGFACEHUB_API_TOKEN"] = "YOUR_HF_TOKEN_HERE"
# Initialize the Hugging Face Hub model
# repo_id refers to a model on the Hugging Face Hub (e.g., "google/flan-t5-large")
llm = HuggingFaceHub(
repo_id="google/flan-t5-large",
model_kwargs={"temperature": 0.5, "max_length": 64}
)
# Invoke the model with a simple prompt
response = llm.invoke("What is the capital of Germany?")
# Print the model's response
print(response)Running Local HF Models
For advanced use cases, you might want to run Hugging Face models locally on your machine, especially if you have powerful hardware. LangChain supports this via the HuggingFacePipeline.
This requires installing the transformers library and often torch or tensorflow, and then loading a model directly. It gives you full control and privacy.
Beyond OpenAI & HF
LangChain's modular design means you're not limited to just OpenAI and Hugging Face!
You can integrate with many other LLM providers, including:
- Google: (e.g.,
GooglePalm,VertexAI) - Anthropic: (e.g.,
ChatAnthropicfor Claude models) - Cohere: (e.g.,
Cohere)
The pattern is very similar: install the relevant library, get an API key, and initialize the corresponding LangChain LLM class.
Selecting Your Perfect LLM
With so many options, how do you pick the right LLM?
- Task Complexity: Simple tasks might use smaller, cheaper models.
- Cost: API calls can add up. Compare pricing across providers.
- Performance: Some models are better at specific tasks (e.g., code generation vs. creative writing).
- Privacy: Local models offer maximum data privacy.
- Latency: Response time can vary.
Experimentation is key to finding the best fit!
Integrate & Conquer!
You've learned how LangChain helps you connect to various LLM providers. Let's check your understanding.
Lesson Summary: LLM Integration
Great job! In this lesson, you learned how to connect different Large Language Models to your LangChain agents.
- We explored how LangChain provides a unified interface for various LLMs.
- You saw practical examples of integrating OpenAI and Hugging Face Hub models.
- We touched upon other providers and discussed factors for choosing the right LLM for your needs.
Now your agents have access to a world of AI brains!
Часто задаваемые вопросы
Урок «Интеграция LLM с LangChain» бесплатный?
Да — полный текст урока «Интеграция LLM с LangChain» бесплатно доступен здесь в веб-версии. Чтобы практиковать его интерактивно (встроенный редактор кода и ИИ-репетитор 24/7) и разблокировать остальной курс AI Agents with LangChain & Autonomous Workflows, подпишись на CoddyKit PRO. Курс AI Agents with LangChain & Autonomous Workflows содержит 4 уроков всего.
Чему я научусь в уроке «Интеграция LLM с LangChain»?
Научитесь подключать различных поставщиков LLM, например OpenAI и Hugging Face, к агентам LangChain Ты практикуешь AI Agents with LangChain & Autonomous Workflows с помощью реального кода, который запускаешь прямо в браузере, и ИИ-репетитор 24/7 отвечает на твои вопросы во время урока.
Нужен ли мне опыт, чтобы начать AI Agents with LangChain & Autonomous Workflows?
Предыдущий опыт не требуется. AI Agents with LangChain & Autonomous Workflows на CoddyKit структурирован для всех уровней — от новичков до продвинутых, поэтому ты можешь начать отсюда или с самого начала и учиться в своем темпе. Это урок 2 из 4.
Сколько времени занимает урок «Интеграция LLM с LangChain»?
Большинство уроков CoddyKit занимают около 5–10 минут. Каждый из них компактный и интерактивный, поэтому ты постоянно делаешь прогресс и продолжаешь с того же места в веб-версии и приложении.
Можно ли писать и запускать код в этом уроке AI Agents with LangChain & Autonomous Workflows?
Да. Каждый урок AI Agents with LangChain & Autonomous Workflows включает встроенный редактор кода, поэтому ты пишешь и запускаешь реальный код прямо в браузере и получаешь моментальную обратную связь от AI — локальная установка не требуется.
Все уроки этого курса
- Эффективные методы проектирования промптов
- Интеграция LLM с LangChain
- Управление параметрами и затратами моделей
- Разбор и проверка структурированного вывода