Hugging Face Diffusers 支持 Flax,实现快速推理
Hugging Face Diffusers 从 0.5.1 版本开始支持 Flax,可在 Google TPUs 上实现超快推理,如 Colab、Kaggle 或 Google Cloud Platform。本文介绍了如何使用 JAX/Flax 运行推理,并提供了相关 Colab 笔记本链接。
Hugging Face Diffusers 从 0.5.1 版本开始支持 Flax,可在 Google TPUs 上实现超快推理,如 Colab、Kaggle 或 Google Cloud Platform。本文介绍了如何使用 JAX/Flax 运行推理,并提供了相关 Colab 笔记本链接。
Hugging Face 优化了 BLOOM 模型的推理服务器,实现了 5 倍的延迟降低和 50 倍的吞吐量提升,并分享了优化过程中的挑战和经验。
推荐理由:本文详细介绍了如何优化 BLOOM 模型的推理服务器,包括多种优化策略和技术,读者可以从中学习到模型优化的方法和经验。
Ethereum 完成合并后,推出 EF Fellowship Program 第二期,旨在支持致力于推动 Ethereum 作为公共福祉的长期愿景的个人。本期共有七位杰出个人入选,他们将推动各自项目,助力 Ethereum 在全球范围内的发展。
Hugging Face 推出 DOI 标识符功能,允许用户直接从 Hub 生成模型或数据集的 DOI,方便学术社区引用和分享。DOI 与对象元数据绑定,提供永久链接,确保信息持久可用。通过与 DataCite 合作,用户可轻松申请 DOI,并更新模型或数据集的新版本。
rinna Co., Ltd. 开发了名为 "Japanese Stable Diffusion" 的日本特定文本到图像模型,通过在日语标题图像上微调 Stable Diffusion 模型实现。该模型接受日语提示并生成反映日本文化风格的图像,可在 Hugging Face 和 GitHub 上使用。
Hugging Face 推出零样本评估工具,支持研究人员评估大型语言模型,无需编写代码,并支持开源生态和评测基准。
推荐理由:该工具使研究人员能够轻松评估大型语言模型,并支持零样本评估,有助于推动开源生态和评测基准的发展。
Hugging Face 推出 Decision Transformers,一种基于 Transformer 的决策模型,通过序列建模实现强化学习。该模型可离线训练,使用预训练权重,并支持自定义数据预处理。在 Gym HalfCheetah 环境中,该模型可学习专家行为,实现半猫奔跑。
OpenRAIL 是一种针对 AI 模型的开放和负责任的许可框架,旨在解决当前开源许可在 AI 模型使用中的不足,并推动 AI 模型的负责任使用。
推荐理由:OpenRAIL 提出了一种新的 AI 许可框架,旨在促进 AI 模型的开放和负责任的使用,读者可以了解其具体内容和潜在影响。
Hugging Face 发布教程,介绍如何使用 Habana Gaudi 基于的 DL1 实例在 AWS 上从零开始预训练 BERT-base 模型,利用 Gaudi 的成本性能优势。教程使用 Hugging Face Transformers、Optimum Habana 和 Datasets 库,通过掩码语言建模预训练 BERT-base 模型。
Hugging Face 推出 Skops,一款开源机器学习模型托管与协作工具,支持将 scikit-learn 模型托管在 Hugging Face Hub,创建模型卡片进行文档化和协作。Skops 可用于模型训练、保存、配置文件生成、模型卡片创建、模型评估和可视化等功能。
Nyströmformer 通过 Nyström 方法近似自注意力机制,在 NLP 和 CV 任务上表现优异,并提供了开源实现。
Ethereum 宣布了 2022-2023 学年学术资助计划的 39 个获奖项目,总金额超过 200 万美元,涵盖经济、共识层、P2P 网络等多个领域,项目团队来自全球 16 个国家。
Nimbus 团队为 Portal 网络,一个旨在重新定义资源受限设备如何参与以太坊网络的跨团队项目做出了关键贡献。他们开发了 Fluffy,一个专门为 Portal 网络设计的 Nimbus 实现,并计划将其集成到 Status 移动应用中。
以太坊推出总额高达75万美元的学术研究资助计划,旨在支持对以太坊、区块链技术及相关领域的正式研究,鼓励学术界、研究机构、博士生等提交项目提案,申请截止日期为2022年4月22日。
以太坊基金会支持了四个日本本地资助项目的获得者,包括zkCREAM匿名投票系统、Ryodan System AG的zkRollups和zkCloud、Startrail艺术作品记录基础设施、w3a.io智能设备认证和Famiee伴侣证书平台,旨在推动以太坊技术的应用和普及。
GASOL 团队发布 0.1.3 版本,优化以太坊智能合约的 gas 消耗。该工具可计算优化后的 EVM 序列,并生成对应的可执行字节码。GASOL 还支持内存和存储操作优化,并与 Yul 优化器进行效率比较。
Devcon Archive V2 正式发布,提供改进的用户体验、更好的内容可发现性、减少对YouTube的依赖,并通过IPFS提供更多去中心化内容。新版本采用移动优先设计,允许用户在任意设备上访问以太坊开发者内容,并支持通过多种方式搜索和筛选视频。此外,Devcon团队还计划将所有内容托管在IPFS上,确保内容的持久性和可访问性。
Ethereum 的 SSZ.dev 平台,一个提供 SSZ 技术规范和资源的开源项目,自 2021 年 3 月获得资助以来,已发布并持续增长,为开发者提供可视化工具、实现列表和测试套件等资源。同时,CadCAD Edu 项目也推出了针对 Ethereum 验证者经济学的 cadCAD Masterclass,为学习者提供模拟和实验 Ethereum 验证者经济的课程和模型。
Ethereum.org 翻译计划自2019年启动以来,已有2000多名社区成员参与,翻译了280万单词,支持37种语言。计划将翻译范围扩展至以太坊生态系统的其他重要内容,并计划在第四季度推出翻译者排行榜和认可页面。
OpenAI 的 GPT-4.0 引入人类反馈机制,以增强对难以评估任务的AI系统监督,旨在提升AI系统的评估准确性。
Imapp 项目通过更精确的估算真实计算成本,为调整 OPCODE 价格提供数据支持;Stereum 项目旨在降低独立验证者设置验证节点的技术门槛,支持更多客户端和创建更多资源。
InterRep 允许用户通过以太坊地址链接社交媒体账户,以验证身份并重建声誉;Statebox 开发了 Compositional Game Theory 软件,用于建模和分析战略互动;Ethereum 基金会隐私和扩展团队推出博客,分享发现和开发成果。
GSN GSN(Gas Station Network)v2 发布,新增模块化架构、更去中心化安全模型和钱包用户体验改进。Quadratic Dollar Homepage(QDH)完成用户界面、MACI 智能合约和文档开发,采用区块链投票机制。
以太坊基金会宣布推出“核心开发者学徒计划”,旨在帮助更多人参与以太坊核心协议的开发。该计划将于6月中旬至9月中旬举行,参与者将有机会深入了解以太坊协议,并获得与核心开发者合作的经验。申请截止日期为5月31日。
OpenAI Scholar 2021学员完成六个月导师计划,产出开源研究项目,获得OpenAI资助和支持。
以太坊基金会推出 EF Fellowship 计划,旨在支持新兴经济体中的区块链项目,通过提供导师指导、专业知识和生态系统领导者的访问,帮助改变者实现项目影响。首个项目包括为肯尼亚小规模农民提供区块链保险解决方案、为阿根廷政府创建基于区块链的数字身份平台、为孟加拉国 BRAC 机构开发区块链和加密策略,以及为全球未联网学校提供以太坊解决方案。
Ethereum 印度奖学金计划 Devfolio 2.0 为 Web2 和 Web3 开发者提供培训,帮助开发者进入以太坊生态系统;Web3 Labs 的 Web3j 项目,旨在让 Java 开发者更容易与以太坊交互,近期更新了文档、插件和智能合约迁移支持。
Ethereum 网络已见证 3.8+ 百万 Ether 存入和 120K+ 活跃验证者上线。最新柏林网络升级已完成,EF 支持的多个项目也在持续进步,包括 Zkopru。
Ethereum Baseline 项目定义了一种协议,允许企业同步其记录系统并减少B2B交易中的错误。该项目使用以太坊主网作为共同参考框架,同时使用零知识证明保持业务逻辑和数据隐私。目前处于v0.1.0版本,已提供API访问、消息传递、隐私、持久性和Solidity合约等核心协议,并获得了Baseline Protocol Grants计划的资金支持。
OpenAI 发现 CLIP 模型中的神经元能够对概念进行多模态识别,无论以文字、符号还是概念形式呈现,这有助于解释 CLIP 在分类视觉概念时的准确性,并推动对模型学习关联和偏差的理解。
Ethereum 生态支持计划公布最新一轮社区资助项目,共分配超过 100 万美元,涵盖社区/教育、新工具、数据分析/可视化和研究四大类别,旨在简化、安全、提高以太坊质押体验。
Ethereum 域名服务 ENS 与 CloudFlare 合作提升 ETH.LINK 服务,支持多币种标准,并部署测试网智能合约以注册 ICANN 域名。Textile 和 3box 获得联合资助,创建 IPLD 签名和加密标准,提高 web3 应用互操作性。
OpenAI 成功扩展 Kubernetes 集群至 7500 节点,为大型模型提供可扩展基础设施,支持快速迭代研究。
Ethereum社区资助项目Gitcoin的CLR资助自2018年起发展壮大,成为开源贡献者支持系统;EIP 1559研发项目获得资金支持,推动社区研究;BLS Hubble前端、Blind Find等工具和Web3 Labs、Nethermind等客户端项目取得进展。
EthereumJS VM v5 版本发布,支持所有历史分叉,引入以 EIP 为中心的虚拟机,采用 TypeScript 编写,并支持 JavaScript Promises,提升开发效率和代码安全性。
Ethereum 新开发者门户上线,提供全面的技术文档和社区教程,支持代码实验和社区协作,目前处于 MVP 阶段,鼓励开发者贡献内容,提升文档质量。
Hugging Face 发布了 PyTorch Block Sparse Matrix 扩展,通过稀疏矩阵计算优化神经网络,使模型更小、更快。该扩展基于 CUTLASS,性能比 PyTorch 稀疏矩阵实现快一个数量级,内存消耗减少 4 倍。未来将优化稀疏模式,提升性能。
OpenAI 的 GPT-4 模型通过人类反馈的强化学习,提升了总结能力。
Ethereum.org 宣布采用 Gatsby 替换 Vuepress,以提升网站扩展性和内容发布效率。同时,网站新增了独立艺术家创作的插图和改进的页面设计,旨在为用户提供更好的用户体验。此外,网站还推出了“获取 ETH”页面,帮助用户找到适合其居住地的钱包和交易所。Ethereum.org 现已支持 30 种语言,并计划在未来几个月推出更多内容。
Ethereum eth2 项目发布新的 Solidity 存款合约,经过正式验证并加入赏金计划;Altona v0.12 测试网预计下周发布,旨在测试 v0.12 规范版本;Sigma Prime 的 beacon-fuzz 项目获得继续资助,用于多客户端差异模糊测试。