Data Warehouse
📘 BigQuery, Snowflake, Redshift।
🌐 BigQuery, Snowflake, Redshift.
🏗️
1
ধারণা · Concept
কী এবং কেন📘 বাংলা ব্যাখ্যা:
BigQuery, Snowflake, Redshift।
BigQuery, Snowflake, Redshift।
🌐 English:
BigQuery, Snowflake, Redshift.
BigQuery, Snowflake, Redshift.
🗂 কোথায় পড়ে
৬. ইঞ্জিনিয়ারিং ও ক্যারিয়ার → বিগ ডেটা ও ডেটা ইঞ্জিনিয়ারিং → Data Warehouse
🎯 এই শাখার লক্ষ্য
Build ETL pipelines, use Spark and warehouses
🧰 টুলস
Spark, Airflow, BigQuery
🪜
ধাপে ধাপে শিখুন · Step-by-step
কেন শিখবেন → কীভাবে শিখবেন → উদাহরণ → সাধারণ ভুল💡 কেন গুরুত্বপূর্ণ?
বিশ্লেষণের জন্য অপ্টিমাইজড কেন্দ্রীয় ডেটা ভান্ডার।
- ধাপ 1OLTP (লেনদেন, অ্যাপ ডাটাবেস) বনাম OLAP (বিশ্লেষণ, ওয়্যারহাউস)
- ধাপ 2কলাম-ভিত্তিক স্টোরেজ: শুধু দরকারি কলাম পড়ে—বড় কুয়েরি দ্রুত
- ধাপ 3স্টার স্কিমা: ফ্যাক্ট (ঘটনা) + ডাইমেনশন (তারিখ, এলাকা)
- ধাপ 4ক্লাউড: BigQuery, Snowflake, Redshift; লোকাল: DuckDB
🧪 বাস্তব উদাহরণ
DuckDB দিয়ে ল্যাপটপেই কোটি সারির Parquet ফাইলে SQL—সার্ভার ছাড়াই।
⚠️ সাধারণ ভুল
অ্যাপের লাইভ ডাটাবেসে ভারী রিপোর্ট কুয়েরি—অ্যাপ ধীর হয়।
🔑 মূল শব্দ (Key terms)
data warehouseOLAPcolumnarstar schemaBigQueryDuckDB
3
সাব-টপিক ও বিস্তারিত · Sub-topics
টপিক → সাব-টপিক → সাব-সাব টপিক4.1 OLTP বনাম OLAP
4.2 স্টার স্কিমা
4.3 কলাম-ভিত্তিক স্টোরেজ
🎬
ভিডিও · Videos (বাংলা ও English)
ক্লিক করলে সাইটের ভেতরেই ফ্লোটিং প্লেয়ারে চলবে · ভিডিও MySQL-এ সংরক্ষিত📺 আরও খুঁজুন
💻
হাতে-কলমে · Try it (Big Data & Data Engineering)
এডিট করে Run চাপুন · Ctrl+Enterimport pandas as pd, sqlite3, io
# Mini ETL: extract CSV -> transform -> load into a warehouse table
raw=io.StringIO("date,district,cases\n2026-01-01,Dhaka,12\n2026-01-01,Sylhet,x\n2026-01-02,Dhaka,15\n")
df=pd.read_csv(raw) # Extract
df["cases"]=pd.to_numeric(df.cases,errors="coerce").fillna(0).astype(int); df["date"]=pd.to_datetime(df.date) # Transform
con=sqlite3.connect(":memory:"); df.to_sql("fact_cases",con,index=False) # Load
print(pd.read_sql("SELECT district, SUM(cases) total FROM fact_cases GROUP BY district",con))❓
সেল্ফ-চেক · Self check
🔗
সংযুক্ত কনসেপ্ট · Connected concepts
এই শাখার অন্যান্য অংশ
1. ETL Pipelines2. Apache Spark PySpark3. Apache Airflow4. Data Warehouse5. NoSQL MongoDB6. Web Scraping BeautifulSoup7. REST APIs for Data
অন্য শাখার সম্পর্কিত টপিক
💻 Data Structures & Algorithms🐍 Variables & Data Types🐼 Series & DataFrame🐼 Filtering Data📈 Data Storytelling🗄️ Relational Database Concepts🧹 Data Cleaning Process🧹 Exploratory Data Analysis🧹 Data Profiling🛠️ Imbalanced Data SMOTE