6月26日,人工智能初创公司Etched宣布成功完成1.2亿美元(约合人民币8.73亿元)的A轮融资,这笔资金将主要用于开发和销售全球首款专为Transformer设计的专用集成电路(ASIC)芯片Sohu。
Etched 公司由两名哈佛大学辍学生加文・乌伯蒂(Gavin Uberti)和克里斯・朱(Chris Zhu)创立,成立时间不到 2 年时间。
Sohu 芯片最大的亮点在于直接把 Transformer 架构蚀刻到芯片中,乌伯蒂称 Sohu 采用台积电的 4 纳米工艺制造,推理性能大大优于 GPU 和其他通用人工智能芯片,同时能耗更低。
在 Llama 70B 吞吐量中,搜狐每秒可处理超过 50 万个 tokens,让用户可以构建 GPU 无法实现的产品。
Sohu 能够实现实时语音代理、毫秒级处理数千字文本、更强大的代码树搜索、并行比较数百个响应、多播推测解码以及实时生成新内容等功能,为未来万亿级参数模型的运行提供了可能。