最近想明白一件事:大厂愿意付钱的地方,正好是学生能低成本积累能力的地方。
做 Agent 这几年我最大的感受是,判断一个模型行不行,最后都落到三个问题:
1. 拿什么题测
2. 怎么算过
3. 结果能不能复现。
这三个问题,没有一个靠算力解决。算力买得到,数据也买得到,“什么算进步”买不到。
按阶段说:本科和低年级,从已有数据做,练的是判断力,不是技术;硕士往 Data & Bench的思维走;博士这条最现实,被写进 model card 的bench,影响力往往大于多数方法论文。
另一边,大厂都在找人出题、打分、做领域评测。跟造 benchmark是同一件工作的两种结算方式,一个换 reputation,一个换现金。
先找一个小到两周能做完的问题,把评分口径写到别人能复现。
阿东,大模型算法工程师,OPC创业者。
#Benchmark #大模型 #AI #算法工程师 #PhD #科研 #职业规划 #求职工具小赛 #算法 #榨干软件howto











