Home › Roadmap › Generative AI & LLMs › Part 6

Vector Databases

📘 এমবেডিং সংরক্ষণ ও খোঁজ।

🌐 Store and search embeddings.

✨ জেনারেটিভ এআই ও LLM🎚 Intermediate📍 Part 6 / 9🧩 3 সাব-টপিক

✨

ধারণা · Concept

কী এবং কেন

📘 বাংলা ব্যাখ্যা:
এমবেডিং সংরক্ষণ ও খোঁজ।

🌐 English:
Store and search embeddings.

🗂 কোথায় পড়ে

৪. ডিপ লার্নিং ও এআই → জেনারেটিভ এআই ও LLM → Vector Databases

🎯 এই শাখার লক্ষ্য

Prompting, APIs, RAG, fine-tuning

🧰 টুলস

OpenAI/Claude API, LangChain, Chroma

🪜

ধাপে ধাপে শিখুন · Step-by-step

কেন শিখবেন → কীভাবে শিখবেন → উদাহরণ → সাধারণ ভুল

💡 কেন গুরুত্বপূর্ণ?

লক্ষ লক্ষ এমবেডিং থেকে মিলিসেকেন্ডে অনুরূপ খোঁজা।

ধাপ 1
এমবেডিং = টেক্সট/ছবির অর্থ বহনকারী ভেক্টর
ধাপ 2
মিল মাপ: cosine similarity, dot product
ধাপ 3
ANN সূচক (HNSW, IVF) দিয়ে আনুমানিক দ্রুত খোঁজ
ধাপ 4
টুল: Chroma, FAISS (লোকাল), pgvector (PostgreSQL), Pinecone/Qdrant; মেটাডেটা ফিল্টার

🧪 বাস্তব উদাহরণ

chroma.add(documents, ids) → query("heatwave health advice", n_results=3)।

⚠️ সাধারণ ভুল

প্রশ্ন ও ডকুমেন্টে ভিন্ন এমবেডিং মডেল ব্যবহার।

🔑 মূল শব্দ (Key terms)

vector databaseembeddingcosine similarityHNSWFAISSpgvector

সাব-টপিক ও বিস্তারিত · Sub-topics

টপিক → সাব-টপিক → সাব-সাব টপিক

6.1 এমবেডিং সংরক্ষণ

6.2 ANN সার্চ6.2.1 HNSW

6.3 টুল6.3.1 Chroma6.3.2 FAISS6.3.3 pgvector

🎬

ভিডিও · Videos (বাংলা ও English)

ক্লিক করলে সাইটের ভেতরেই ফ্লোটিং প্লেয়ারে চলবে · ভিডিও MySQL-এ সংরক্ষিত

📺 আরও খুঁজুন

🇧🇩 Bangla ChatGPT API ↗
🌐 Andrej Karpathy ↗DeepLearningAI ↗

💻

হাতে-কলমে · Try it (Generative AI & LLMs)

এডিট করে Run চাপুন · Ctrl+Enter

import numpy as np
# Mini RAG retrieval: bag-of-words embeddings + cosine similarity
docs=["Dengue spreads through Aedes mosquitoes","NDVI measures vegetation health","Transformers use self-attention"]
vocab=sorted({w.lower() for d in docs for w in d.split()})
emb=lambda s:np.array([s.lower().split().count(w) for w in vocab],float)
D=np.array([emb(d) for d in docs]); q=emb("what does NDVI measure")
sim=D@q/(np.linalg.norm(D,axis=1)*np.linalg.norm(q)+1e-9)
print("Retrieved context:",docs[sim.argmax()]); print("Prompt -> 'Answer using: "+docs[sim.argmax()]+"'")

❓

সেল্ফ-চেক · Self check

1. “HNSW” — এটি কোন সাব-টপিকের বর্ণনা?

2. “Chroma, FAISS, pgvector” — এটি কোন সাব-টপিকের বর্ণনা?

🔗

সংযুক্ত কনসেপ্ট · Connected concepts