用微信扫码二维码

分享至好友和朋友圈

导读：Unix 之父 Ken Thompson 从 Mac 转到了 Linux 大语言模型涌现无法预测的能力 让 Python 和 C 语言性能相当的新编译器 » »

本文字数：1102，阅读时长大约： 1分钟

作者：硬核老王

Unix 之父 Ken Thompson 从 Mac 转到了 Linux

今年已 80 岁的 Ken Thompson 是 Unix、C 语言、Go 语言等一系列重要项目的共同创造者。他在最近的一次演讲中，回答了一个问题 “如今使用什么操作系统？”他说，“在我生命中的大部分时间里都在运行苹果操作系统。”但最近五年他开始对苹果不太满意了，而最近几个月，他把它扔了，使用 Linux 了，尤其是树莓派上运行的 Raspbian，即树莓派操作系统。这引来了在场观众的掌声。

大语言模型涌现无法预测的能力

2017 年谷歌大脑的研究人员提出了被称为 转化器(Transformer) 的新型架构（即 GPT 中的 “T” —— 生成式预训练转化器），它能并行处理大块文本，能通过增加模型的参数快速扩展语言模型的复杂度。2020 年 OpenAI 的研究人员发现随着参数规模的增加，大语言模型改进了其能力和准确度。但大语言模型也同时带来了一些始料未及的东西。研究人员发现大语言模型产生了数以百计的“新”能力，这种行为被称为“涌现(emergent)”。了解涌现可揭示出 AI 和一般机器学习深层问题的答案，如复杂模型是真的在做新事情，还是极其擅长统计。

让 Python 和 C 语言性能相当的新编译器

Codon 是一个新的 “高性能 Python 编译器，它可以将 Python 代码编译为本地机器代码，没有任何运行时间的开销”。与 Python 相比，在单线程上，典型的速度提升是 10-100 倍或更多。而且 Codon 支持原生多线程，这可以使速度再提高许多倍。Codon 的性能与 C/C++ 的性能相当（有时甚至更好）。用户只需像他们习惯的那样写 Python，而不必担心数据类型或性能，Codon 会自动处理这些问题，他们的代码运行速度比普通 Python 快 10 到 100 倍。

昨日观察

欢迎遵照 CC-BY-SA 协议规定转载，

如需转载，请在文章下留言 “ 转载：公众号名称”，

我们将为您添加白名单，授权“ 转载文章时可以修改”。

特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.