【2024机器学习社区状况展望】
- 2024年是NLP领域突破和能力增强的一年，我们可以期待大量的进步，但无法预测具体细节，LLM技术正在快速迭代，进展速度是过去的10倍。
- 过去一年里，行业的预期和话语权发生了转移。这个时代充满机会，新的人物也在崛起并超越之前认为的同行，在LLM领域，现在可能还为时不晚。
- “他们只想学习”描述了当前LLM领域的基本状态。只要有足够的数据和算力，信号基本都能出现，这表明我们的模型训练和数据构建方式存在深层次的契合。
- 2024年将会出现大量LLM产品和服务，以证明过去18个月的大量投资，我们将看到能力和鲁棒性的快速进步。
- 如今，大部分人要么接受了自己的定位，要么接受了扩大自己世界观的必要性，不再有对大实验室的憎恨，也不再有学术界的悲观主义；现在是创造的时候了。
- 许多人感觉他们所做的一切都在向着自己的目标和愿景迈进一步，这种状态下，人们能激发出前所未有的热情和动力。
- 目前最热情的LLM人士，大多深深关心ML如何与社会互动，尽管方法不同，但目标是类似的。
- 在看到具体的安全风险之前，市场捕获和模型分析不足的危害 更大，我们需要深入研究LLM的失效模式，这需要能访问模型权重、激活等信息。
- 2024年是建设者的一年，批评者应提出自己的权衡取舍，而不是简单攻击他人的工作，建设者更愿意倾听其他建设者的意见。
- 科学家们希望建设有价值、考虑伦理的系统，并使之真正为社会所用，开放科学群体应当发出自己的声音参与讨论。
《It's 2024 and they just want to learn - by Nathan Lambert》
网页链接 #机器学习# #人工智能#
- 2024年是NLP领域突破和能力增强的一年，我们可以期待大量的进步，但无法预测具体细节，LLM技术正在快速迭代，进展速度是过去的10倍。
- 过去一年里，行业的预期和话语权发生了转移。这个时代充满机会，新的人物也在崛起并超越之前认为的同行，在LLM领域，现在可能还为时不晚。
- “他们只想学习”描述了当前LLM领域的基本状态。只要有足够的数据和算力，信号基本都能出现，这表明我们的模型训练和数据构建方式存在深层次的契合。
- 2024年将会出现大量LLM产品和服务，以证明过去18个月的大量投资，我们将看到能力和鲁棒性的快速进步。
- 如今，大部分人要么接受了自己的定位，要么接受了扩大自己世界观的必要性，不再有对大实验室的憎恨，也不再有学术界的悲观主义；现在是创造的时候了。
- 许多人感觉他们所做的一切都在向着自己的目标和愿景迈进一步，这种状态下，人们能激发出前所未有的热情和动力。
- 目前最热情的LLM人士，大多深深关心ML如何与社会互动，尽管方法不同，但目标是类似的。
- 在看到具体的安全风险之前，市场捕获和模型分析不足的危害 更大，我们需要深入研究LLM的失效模式，这需要能访问模型权重、激活等信息。
- 2024年是建设者的一年，批评者应提出自己的权衡取舍，而不是简单攻击他人的工作，建设者更愿意倾听其他建设者的意见。
- 科学家们希望建设有价值、考虑伦理的系统，并使之真正为社会所用，开放科学群体应当发出自己的声音参与讨论。
《It's 2024 and they just want to learn - by Nathan Lambert》
网页链接 #机器学习# #人工智能#
