tensoratolyesi.com
Tensor Atölyesi
Okuyarak değil, kurup bozarak öğrenme. Bir açık modeli kendi donanımında verimli çalıştırıp şirkete API olarak sunmayı öğrenen bir atölye. Python ile kavramlar, Rust ile inference motoru. Türkçe.
- Transformer'ın içi: dil modelini sıfırdan yazmak
- Mac'te inference: llama.cpp ve MLX
- vLLM kavramları: KV cache, batching, quantization
- Rust ile inference: candle
- Kiralık GPU'da vLLM ve tensor parallel
- GPU altyapısı: CUDA, Docker, Kubernetes
- Fine-tuning ve eval
- Platform katmanı: gateway, metrikler, maliyet
İlk ders yolda.