LLM热潮背后的魔幻与现实

Hacker News等社区针对LLM的讨论存在两极分化，因缺乏量化和上下文信息导致体验难以比较。

缺少对项目类型、代码库成熟度、使用者专业水平和额外工作量的量化，使得各自评价无法对比。

LLM模型具有非确定性，同一任务的表现可能时好时坏，统计特性决定了其“半数”可靠性。

行业领袖和媒体的夸大宣传助长了“神话”效应，往往压制批判性思维。

作者自己日常使用各种LLM工具，验证其约50%情况下有效，既非魔法亦非完全工程化。