Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

作者：HuggingFace发布时间：2024-01-04

太长不看版: Hub 上有不少数据集没有语言元数据，我们用机器学习来检测其语言，并使用 librarian-bots 自动向这些数据集提 PR 以添加其语言元数据。 Hugging Face Hub...【查看原文】

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

引言我们很高兴地宣布由 Technology Innovation Institute (TII) 训练的开源大模型 Falcon 180B 登陆 Hugging Face! Falcon 180B 为开源大模型树立了全新的标杆。作为当前最大的开源大模型，有180B 参数并且是在在 3.5 万亿 token 的 TII RefinedWeb 数据集上进行训练，这也是目前开源模型里最长的单波段预训练。TII: https://falconllm.tii.ae/RefinedWeb:https://hf.co

Hugging Face

HuggingFace 2023-09-06

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

Google 发布了最新的开放大语言模型 Gemma 2，我们非常高兴与 Google 合作，确保其在 Hugging Face 生态系统中的最佳集成。你可以在 Hub 上找到 4 个开源模型 (2 个基础模型和 2 个微调模型) 。发布的功能和集成包括：Hub 上的模型https://hf.co/collections/google/g-667d6600fd5220e7b967f315Hugging Face Transformers 集成https://github.com/huggingface/t

谷歌大语言模型 Hugging Face GitHub

HuggingFace 2024-06-28

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

在 Hugging Face，我们一直致力于提升服务安全性，因此，我们将对通过 Git 与 Hugging Face Hub 交互时的认证方式进行更改。从 2023 年 10 月 1 日开始，我们将不再接受密码作为命令行 Git 操作的认证方式。我们推荐使用更安全的认证方法，例如用个人访问令牌替换密码或使用 SSH 密钥。背景近几个月来，我们已经实施了各种安全增强功能，包括登录提醒和 Git 中对 SSH 密钥的支持，不过，用户仍然可以使用用户名和密码进行 Git 操作的认证。为了进一步提高安全性，我们

Hugging Face

HuggingFace 2023-08-31

Hugging Face 的 Transformers 库学习总结

Transformers 库是什么自然语言处理简称 NLP ，是语言学习和机器学习交叉领域，专注于理解与人类语言相关的一切。常见的 NLP 任务列表如下：对整个句子进行分类：获取评论的情绪，检

Hugging Face 机器学习

tinker 2023-08-13

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers 说明：首次发表日期：2024-09-19

Hugging Face

shizidushu 2024-09-19

近期资讯

山东邹平推出“AI+普法”宣传产品

员滕甜甜近日，山东滨州邹平市司法局创新推出“AI+普法”宣传产品——智能数字法治播报员，让法治之声“飞入寻常百姓家”。

央广网 2024-12-29

英伟达RTX 4080性能提升高达50% 虚幻引擎5.5带来颠覆性新技术

最新发布的虚幻引擎5.5引入了一项名为MegaLights的新功能，有望显著提升游戏性能。根据测试结果，在1440p和4K分辨率下，使用该功能后英伟达RTX4080显卡的性能提升高达50%。这项新技术不仅提升了性能，还在各种高分辨率下显著改善了视觉效果。MegaLights允许开发者添加数百个动态的、投射阴影的光源，而不再受以往的限制。

中关村在线 2024-12-29

探索汉字“星”的拼音及其在生活和文化中的深刻意义

《星怎么拼音》在我们的生活中，星星是一个非常美丽而又神秘的存在。而在学习汉语的过程中，拼音是一个非常重要的部分，尤其是对于初学者来说，掌握拼音能够帮助我们更好地理解和发音。

新报观察 2024-12-29

恒星的形成与演化：宇宙中璀璨星星的神秘旅程与生命历程

恒星是宇宙中最迷人的天体之一，它们不仅照亮了夜空，也在宇宙演化中扮演着重要的角色。想象一下，在浩瀚的宇宙中，恒星是如何从一团气体和尘埃，逐渐演变成璀璨的星星的呢？首先，我们得说，恒星的“家”是星际介质。

新报观察 2024-12-29

“虹膜写真”日益走红，安全隐患也浮出水面……

“用快门定格双眸”“让浩瀚宇宙在你的眼里遨游”……近期，一些主打“虹膜写真”的摄影馆在多地悄然兴起，各类社交平台上的“种草”帖，吸引了不少年轻人前去拍摄打卡。由于虹膜包含很多相互交错的斑点、细丝、冠状、条纹、隐窝等细节特征，且每个人的虹膜特征均不相同，因此被一些人认为具有拍摄留存的艺术价值。

央广网 2024-12-29

带毒！智能手表表带对人体有害！

12月29日，《环境科学与技术快报》杂志发表的一项研究发现，许多流行的智能手表表带中含有高浓度的多氟烷基和全氟烷基物质（PFAS），这些物质长期存在对人体健康有重大影响。研究针对名为氟橡胶的表带材料进行了检测，结果发现大多数表带都含有高浓度的全氟己酸（PFHxA）。

中关村在线 2024-12-29

华为服务回馈礼遇活动 12 月 31 日结束：换电池立减 50 元等

IT之家12月29日消息，距离2024年结束仅剩3天，华为服务回馈礼遇活动也将于12月31日正式结束，相关服务回馈礼遇活动主要包含官方维修备件8.8折、换电池立减50元、免费贴膜、维修免人工费、免上门服务费等。

IT之家 2024-12-29

索尼 PlayStation 联合CEO：主机市场并未走向衰落，仍是业务核心

IT之家12月29日消息，近期围绕主机游戏市场是否走向衰落的担忧在玩家群体中蔓延，面对市场变化，Xbox和PlayStation采取了不同的策略。微软逐渐放弃独占策略，而PlayStation则明确表示将以更贴近玩家的方式进行调整。

IT之家 2024-12-29

抖音创作指南：如何添加视频、音乐与文字等内容的详细步骤

想要在抖音上添加一些内容，可能对于很多小伙伴来说，还是有点陌生的。没关系，今天我就来给大家详细讲讲，抖音到底怎么添加各种东西，比如视频、文字、音乐等等。希望这些内容能帮助你更好地在抖音上进行创作，和大家分享你的生活点滴。我们先来聊聊怎么添加视频。如果你想要发布一段短视频，其实操作非常简单。

新报观察 2024-12-29

沪滇科技成果对接交流活动在芒市举行

12月26日，由上海市科学技术委员会、云南省科技厅和德宏傣族景颇族自治州政府共同举办的2024沪滇科技成果对接交流活动在芒市举行。

央广网 2024-12-29

Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

推荐体验

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

Hugging Face 的 Transformers 库学习总结

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

近期资讯

山东邹平推出“AI+普法”宣传产品

英伟达RTX 4080性能提升高达50% 虚幻引擎5.5带来颠覆性新技术

探索汉字“星”的拼音及其在生活和文化中的深刻意义

恒星的形成与演化：宇宙中璀璨星星的神秘旅程与生命历程

“虹膜写真”日益走红，安全隐患也浮出水面……

带毒！智能手表表带对人体有害！

华为服务回馈礼遇活动 12 月 31 日结束：换电池立减 50 元等

索尼 PlayStation 联合CEO：主机市场并未走向衰落，仍是业务核心

抖音创作指南：如何添加视频、音乐与文字等内容的详细步骤

沪滇科技成果对接交流活动在芒市举行

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响