Sewa Senior Backend Engineer: Arsitektur Python (Django, FastAPI), Microservices Golang, PostgreSQL & Sistem Terdistribusi Berkapasitas Tinggi
Ketika latensi p99 API melonjak saat jam sibuk, kondisi balapan (race condition) mengacaukan saldo transaksi, atau pengiriman ulang webhook memicu duplikasi pesanan, Anda membutuhkan Backend Engineer yang merancang ketepatan transaksional, kontrol konkurensi, dan efisiensi indeks basis data sejak hari pertama. Saya Aldian Fazrihady, Senior Backend Engineer, Cloud Engineer, serta pemegang sertifikasi resmi GCP Professional Cloud Architect dan GCP Professional Data Engineer dengan pengalaman produksi 15+ tahun di Python (Django, DRF, FastAPI, Celery, SQLAlchemy 2.0, asyncpg), Go (Golang gRPC/REST), PostgreSQL, dan Redis.
1. Memilih Runtime Backend yang Tepat: Python (Django / FastAPI) vs. Golang
| Profil Beban Kerja | Rekomendasi Stack Produksi | Mekanisme Konkurensi & Persistensi Utama |
|---|---|---|
| SaaS Multi-Tenant, Portal Enterprise & Kesehatan FHIR | Python 3.12 + Django / DRF + Celery + PostgreSQL | Batas transaksi ORM ketat, Row-Level Security, Channels WebSockets |
| Gateway AI Asinkron, Streaming SSE & Agregator I/O Tinggi | FastAPI + Pydantic v2 + SQLAlchemy 2.0 + asyncpg + PgBouncer |
Event loop non-blocking, pool koneksi terukur (pool_size / max_overflow) |
| Buku Besar Pembayaran (Ledger), Jembatan OAuth2 & Crawler Cepat | Go (Golang 1.23+) + pgxpool + gRPC / Protobuf + NATS/Kafka |
Latensi p99 di bawah 2ms, worker pool goroutine, memori hemat tanpa lonjakan GC |
2. Pola Produksi PostgreSQL: Buku Besar Idempoten & Transactional Outbox
Menulis ke PostgreSQL sekaligus mengirim pesan ke broker secara langsung di dalam handler HTTP berisiko menghilangkan event saat proses mengalami gangguan. Berikut pola buku besar idempoten + transactional outbox menggunakan Go (pgx/v5) dan PostgreSQL FOR UPDATE SKIP LOCKED agar pengiriman ulang webhook tidak pernah menggandakan saldo:
package ledger
import (
"context"
"encoding/json"
"errors"
"github.com/jackc/pgx/v5"
"github.com/jackc/pgx/v5/pgxpool"
)
type CreditCommand struct {
IdempotencyKey string
AccountID string
AmountCents int64
Currency string
}
func ApplyVerifiedCredit(ctx context.Context, pool *pgxpool.Pool, cmd CreditCommand) error {
if cmd.AmountCents <= 0 {
return errors.New("amount must be positive")
}
tx, err := pool.BeginTx(ctx, pgx.TxOptions{IsoLevel: pgx.ReadCommitted})
if err != nil {
return err
}
defer tx.Rollback(ctx)
tag, err := tx.Exec(ctx, `
INSERT INTO idempotency_keys (key, created_at)
VALUES ($1, NOW())
ON CONFLICT (key) DO NOTHING
`, cmd.IdempotencyKey)
if err != nil {
return err
}
if tag.RowsAffected() == 0 {
return nil
}
_, err = tx.Exec(ctx, `
UPDATE ledger_accounts
SET balance_cents = balance_cents + $1, updated_at = NOW()
WHERE id = $2 AND currency = $3
`, cmd.AmountCents, cmd.AccountID, cmd.Currency)
if err != nil {
return err
}
payload, _ := json.Marshal(cmd)
_, err = tx.Exec(ctx, `
INSERT INTO transactional_outbox (aggregate_id, event_type, payload, published_at)
VALUES ($1, 'ledger.account.credited', $2, NULL)
`, cmd.AccountID, payload)
if err != nil {
return err
}
return tx.Commit(ctx)
}
3. Optimasi Async Python: SQLAlchemy 2.0, asyncpg, PgBouncer & Keyset Pagination
Pada layanan Python asinkron yang terhubung melalui PgBouncer mode transaction, statement_cache_size=0 mencegah galat prepared statement saat autoscaling, sedangkan paginasi kursor menjaga latensi kueri tetap O(1) pada ratusan juta baris:
from sqlalchemy import select, and_, or_
from sqlalchemy.ext.asyncio import create_async_engine, async_sessionmaker
engine = create_async_engine(
"postgresql+asyncpg://app_user:secret@pgbouncer.internal:6432/prod_db",
pool_size=20,
max_overflow=10,
pool_pre_ping=True,
pool_recycle=1800,
connect_args={"statement_cache_size": 0, "command_timeout": 15},
)
SessionLocal = async_sessionmaker(engine, expire_on_commit=False)
async def list_events_keyset(cursor_ts, cursor_id, limit: int = 50):
async with SessionLocal() as session:
stmt = select(Event).order_by(Event.created_at.desc(), Event.id.desc()).limit(limit)
if cursor_ts is not None and cursor_id is not None:
stmt = stmt.where(
or_(
Event.created_at < cursor_ts,
and_(Event.created_at == cursor_ts, Event.id < cursor_id),
)
)
return (await session.scalars(stmt)).all()
4. Pertanyaan Umum (FAQ) — Merekrut Senior Backend Engineer
Masalah backend apa saja yang bisa dituntaskan dalam Sprint Pemrograman 1 Hari (Rp 1.000.000)?
Contoh sprint 1 hari meliputi audit dan optimasi kueri lambat PostgreSQL (EXPLAIN (ANALYZE, BUFFERS) beserta indeks komposit/parsial), pembuatan endpoint pembayaran QRIS / Virtual Account dan Kartu Internasional yang idempoten, perbaikan kebocoran memori worker Celery/Redis, atau middleware autentikasi OAuth2/JWT di Go dan Python.
Bagaimana cara mencegah kueri N+1 dan penguncian tabel saat migrasi skema?
Saya menerapkan select_related / prefetch_related dengan pengujian batas jumlah kueri di CI, memisahkan panggilan HTTP pihak ketiga dari transaksi database, menerapkan lock_timeout, serta menjalankan CREATE INDEX CONCURRENTLY tanpa memblokir trafik baca/tulis.
Panduan Pendamping: Keandalan Backend TypeScript & Node.js
Mengatasi cache stampede PostgreSQL maupun timeout layanan upstream di Node.js/Express? Baca Backend TypeScript & Node.js: Singleflight Cache Stampede & Circuit Breaker Upstream.