Bab 1, Menggabungkan Computer Vision dan Reinforcement Learning, mengenalkan Anda pada terminologi reinforcement learning
(RL) dan penentuan bobot (value) pada sebuah kondisi (state).
Anda akan melihat keindahan kolaborasi RL dan NNs melalui Deep Q-Learning, lalu menggunakannya untuk menciptakan agent AI cerdas yang
bisa bermain game Pong dan bahkan mengemudikan mobil otonom (self-driving
car). Apa lagi yang bisa dikolaborasikan dengan AI visual kita?
Bab 2, Menggabungkan Computer Vision dan Teknik NLP, membedah detail tentang cara kerja transformers. Berbekal
ilmu ini, Anda akan membangun aplikasi image classification, handwriting
recognition, ekstraksi kunci-nilai (key-value) dari foto paspor,
hingga merancang sistem visual question answering (VQA).
Bab 3, Foundation Models dalam Computer Vision, memperkuat fondasi Anda dalam memadukan gambar dan teks
menggunakan model CLIP. Lalu, kita akan bermain dengan Segment Anything Model (SAM) dari Meta, yang sangat
andal untuk tugas segmentasi dan tracking tanpa perlu di-training
dari awal. Bab ini juga membahas diffusion models, esensi dari prompt engineering, dan kedahsyatan model pre-trained
masif seperti SDXL.
Bab 4, Aplikasi Stable Diffusion, adalah
ajang pembuktian ilmu generatif Anda. Kita akan membahas ekosistem aplikasi Stable
Diffusion (mulai dari image in-painting, ControlNet, DepthNet, SDXL
Turbo, hingga text-to-video), meninjau cara mereka dilatih, dan mempraktikkannya ke dalam
beragam task kreatif.
Bab 5, Membawa Model ke Production,
adalah langkah pamungkas dari perjalanan ini. Anda akan membekali diri dengan best
practices saat men-deploy model di dunia nyata. Mulai dari deployment
lokal hingga menggunakan public cloud dari AWS. Anda juga akan
menganalisis dampak dari komputasi half-precision (FP16) terhadap
latensi, mengintegrasikan vector stores (seperti FAISS), dan mengidentifikasi fenomena data drift saat model Anda sudah
berjalan di tahap production.
Computer Vision Modern dengan PyTorch Jilid 3
Penulis:
Dr. Phil. Dony Novaliendry, S. Kom., M. Kom
Tebal Halaman: 248
