البحث الهجين باستخدام متجهات Sparse وDense
تعلّم كيف يجمع Pinecone بين المتجهات الدلالية الكثيفة ومتجهات الكلمات المفتاحية المتناثرة لتوفير بحث هجين يلتقط المعنى والمصطلحات المطابقة معًا.
البحث الهجين باستخدام متجهات Sparse وDense درس مجاني في Vector Databases: Pinecone, Weaviate & pgvector على CoddyKit. هذا هو الدرس 4 من أصل 4. يمكنك قراءة الدرس كاملاً أدناه مجاناً — ثم تمرن عليه مباشرة في المتصفح باستخدام محرر أكواد مدمج ومدرس ذكاء اصطناعي متاح 24/7. هذا الدرس جزء من مسار التعلم في Vector Databases: Pinecone, Weaviate & pgvector، وتقدمك يتزامن عبر الويب وتطبيق CoddyKit. تتضمن دورة Vector Databases: Pinecone, Weaviate & pgvector 4 دروس في المجموع.
بعض أجزاء هذا الدرس لم تُترجم بعد وتظهر باللغة الإنجليزية.
The Limits of Dense-Only Search
Dense vectors capture meaning but can miss exact terms like product codes, names, or rare keywords. A user searching 'error E4012' may get semantically related but wrong results.
Hybrid search fixes this by adding keyword matching.
Dense vs Sparse Vectors
Two vector kinds:
- Dense — a few hundred floats encoding semantic meaning
- Sparse — mostly zeros, with weights only for present terms (like keyword scores)
Sparse vectors behave like classic keyword search.
What Sparse Vectors Look Like
A sparse vector is stored as indices and values for the non-zero terms.
sparse = {'indices': [10, 42, 77], 'values': [0.8, 0.5, 0.3]}
print('non-zero terms:', len(sparse['indices']))Why Hybrid Wins
Hybrid search combines the strengths:
- Dense handles synonyms and intent
- Sparse guarantees exact-term matches
- Together they boost recall and precision
Pinecone Hybrid Indexes
To use hybrid search in Pinecone, create a dotproduct index and upsert each record with both a dense values array and a sparse_values field. Queries supply both representations of the query.
Upserting a Hybrid Record
A record carries dense and sparse parts together.
record = {
'id': 'doc1',
'values': [0.1, 0.2, 0.3],
'sparse_values': {'indices': [5, 9], 'values': [0.7, 0.4]},
'metadata': {'title': 'Setup guide'}
}
print(record['id'], 'has', len(record['values']), 'dense dims')The Alpha Weighting
Hybrid queries use an alpha parameter to weight dense vs sparse. alpha=1 is pure dense, alpha=0 is pure sparse. Tune it for your data.
def weight(dense_vec, sparse_vals, alpha):
d = [v*alpha for v in dense_vec]
s = [v*(1-alpha) for v in sparse_vals]
return d, s
print(weight([1.0], [1.0], 0.7))Generating Sparse Vectors
Sparse vectors come from keyword models like BM25 or learned sparse encoders (e.g. SPLADE). They map terms to weighted indices that Pinecone can match against stored records.
Tuning Alpha
The right alpha depends on your queries:
- Keyword-heavy domains (codes, IDs) -> lower alpha
- Natural-language questions -> higher alpha
Test on real queries and measure both recall and precision.
When to Use Hybrid
Reach for hybrid when exact terms matter: legal, medical, technical docs, or catalogs with SKUs. For purely conversational content, dense alone may be enough and simpler.
Bringing It Together
Hybrid search in Pinecone = a dotproduct index, records with dense and sparse values, queries supplying both, and a tuned alpha. It captures meaning and exact terms in one ranked result set.
Quick Check
Test your understanding of hybrid search.
Recap
You learned that hybrid search combines dense semantic vectors with sparse keyword vectors so Pinecone captures both meaning and exact terms. Use a dotproduct index, upsert both representations, and tune the alpha weighting to your query mix.
الأسئلة الشائعة
هل درس «البحث الهجين باستخدام متجهات Sparse وDense» مجاني؟
نعم — نص درس «البحث الهجين باستخدام متجهات Sparse وDense» كامل متاح مجاناً هنا على الويب. لتمرينه بشكل تفاعلي (محرر أكواد مدمج ومدرس ذكاء اصطناعي متاح 24/7) وفتح باقي دورة Vector Databases: Pinecone, Weaviate & pgvector، انتقل إلى CoddyKit PRO. تتضمن دورة Vector Databases: Pinecone, Weaviate & pgvector 4 دروس في المجموع.
ماذا ستتعلم في «البحث الهجين باستخدام متجهات Sparse وDense»؟
تعلّم كيف يجمع Pinecone بين المتجهات الدلالية الكثيفة ومتجهات الكلمات المفتاحية المتناثرة لتوفير بحث هجين يلتقط المعنى والمصطلحات المطابقة معًا. تتمرن على Vector Databases: Pinecone, Weaviate & pgvector مع أكواد عملية تشغلها مباشرة في المتصفح، ومدرس ذكاء اصطناعي متاح 24/7 يجيب على أسئلتك أثناء عملك.
هل أحتاج إلى خبرة سابقة لأبدأ Vector Databases: Pinecone, Weaviate & pgvector؟
لا تُشترط خبرة سابقة. Vector Databases: Pinecone, Weaviate & pgvector على CoddyKit منظم للمبتدئين حتى المتقدمين، لذا يمكنك البدء من هنا أو من البداية والتقدم بسرعتك الخاصة. هذا هو الدرس 4 من أصل 4.
كم من الوقت يستغرق درس «البحث الهجين باستخدام متجهات Sparse وDense»؟
معظم دروس CoddyKit تستغرق حوالي 5–10 دقائق. كل منها موجز وتفاعلي، لذا تحرز تقدماً مستمراً وتستأنف من حيث توقفت عبر الويب والتطبيق.
هل يمكنني كتابة وتشغيل أكواد في درس Vector Databases: Pinecone, Weaviate & pgvector هذا؟
نعم. كل درس في Vector Databases: Pinecone, Weaviate & pgvector يتضمن محرر أكواد مدمج، لذا تكتب وتشغل أكواداً حقيقية مباشرة في متصفحك وتحصل على تعليقات فورية من الذكاء الاصطناعي — بدون إعداد محلي.
جميع الدروس في هذه الدورة
- التصفية باستخدام البيانات الوصفية
- إدارة مساحات الأسماء
- التحديثات وعمليات الحذف الفورية
- البحث الهجين باستخدام متجهات Sparse وDense