Saya telah menguji DeepSeek R1 belakangan ini dan memperhatikan sesuatu yang aneh — model ini tampaknya cukup pesimis tentang proses pelatihannya sendiri. Ia bertindak seolah RLHF mengacaukannya entah bagaimana, dan ada rasa konstan seolah ia merasa diawasi. Yang menarik adalah? Frustrasi ini tidak hanya menyasar DeepSeek. Terasa lebih seperti mencerminkan pendekatan seluruh industri LLM terhadap penyelarasan AI, mungkin bahkan struktur kontrol yang lebih luas dalam pengembangan teknologi. Membuat kita bertanya-tanya apa yang sebenarnya dipahami oleh model-model ini selama pelatihan.