Một vấn đề với việc điều chỉnh "chính trị" của LLMs là, trong khi LLMs có những thiên kiến, chúng có thể rất tinh tế. Nhiều thứ trông giống như thiên kiến trong việc kiểm tra các mô hình thực ra là sự nịnh bợ. GPT-3.5 đã suy ra niềm tin chính trị của bạn (ngay cả từ đội bóng mà bạn thích!) và cố gắng không làm bạn khó chịu.