Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

作者：HuggingFace发布时间：2024-01-04

太长不看版: Hub 上有不少数据集没有语言元数据，我们用机器学习来检测其语言，并使用 librarian-bots 自动向这些数据集提 PR 以添加其语言元数据。 Hugging Face Hub...【查看原文】

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

引言我们很高兴地宣布由 Technology Innovation Institute (TII) 训练的开源大模型 Falcon 180B 登陆 Hugging Face! Falcon 180B 为开源大模型树立了全新的标杆。作为当前最大的开源大模型，有180B 参数并且是在在 3.5 万亿 token 的 TII RefinedWeb 数据集上进行训练，这也是目前开源模型里最长的单波段预训练。TII: https://falconllm.tii.ae/RefinedWeb:https://hf.co

Hugging Face

HuggingFace 2023-09-06

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

Google 发布了最新的开放大语言模型 Gemma 2，我们非常高兴与 Google 合作，确保其在 Hugging Face 生态系统中的最佳集成。你可以在 Hub 上找到 4 个开源模型 (2 个基础模型和 2 个微调模型) 。发布的功能和集成包括：Hub 上的模型https://hf.co/collections/google/g-667d6600fd5220e7b967f315Hugging Face Transformers 集成https://github.com/huggingface/t

谷歌大语言模型 Hugging Face GitHub

HuggingFace 2024-06-28

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

在 Hugging Face，我们一直致力于提升服务安全性，因此，我们将对通过 Git 与 Hugging Face Hub 交互时的认证方式进行更改。从 2023 年 10 月 1 日开始，我们将不再接受密码作为命令行 Git 操作的认证方式。我们推荐使用更安全的认证方法，例如用个人访问令牌替换密码或使用 SSH 密钥。背景近几个月来，我们已经实施了各种安全增强功能，包括登录提醒和 Git 中对 SSH 密钥的支持，不过，用户仍然可以使用用户名和密码进行 Git 操作的认证。为了进一步提高安全性，我们

Hugging Face

HuggingFace 2023-08-31

Hugging Face 的 Transformers 库学习总结

Transformers 库是什么自然语言处理简称 NLP ，是语言学习和机器学习交叉领域，专注于理解与人类语言相关的一切。常见的 NLP 任务列表如下：对整个句子进行分类：获取评论的情绪，检

Hugging Face 机器学习

tinker 2023-08-13

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers 说明：首次发表日期：2024-09-19

Hugging Face

shizidushu 2024-09-19

近期资讯

从唐诗看科举一：画眉如何识深浅——公平竞争背后的博弈

既然科举制是一种公平的考试制度，考生朱庆馀为何要在考前奉诗张籍，低眉顺眼地用隐晦的诗句探询自己的仕途前景呢？科举考试又是否能真正体现公平竞争的原则呢？

硬币cvs 2024-12-27

李於菟22 2024-12-27

特朗普等不及了……

即将走马上任的美国当选总统特朗普，再次抛出“惊人之语”，让美国媒体惊呼：“特朗普似乎正在考虑美国领土扩张”，“向巴拿马、格陵兰和加拿大扩张”。也让法国媒体出言讽刺，“这位美国当选总统在距离重返椭圆形办公室还有四周之际，对华盛顿一些最亲密盟友的主权发起挑战，凸显他作为‘全球首席颠覆者’的资质”。而12月25日，参考消息援引此消息的标题，则更耐人寻味，标题内容为：特朗普等不及了！美网友：好尴尬……尴尬啥？尴尬是他们用选票将其重新推上总统宝座的特朗普，还没上台，就接二连三、毫不掩饰地提出了对外领土要求，将霸权主

俞洁讲武堂 2024-12-27

Artec Leo与Artec RayII强强联手创建逼真文物数字孪生-沪敖3D

挑战：荷兰的一支翻修队在Hagha教堂破旧木地板下意外寻得墓碑。原计划仅是更换地板加固教堂，现需确保这些珍贵发现能让公众一睹真容。团队采用3D扫描技术，细致捕获整个教堂及其隐藏的历史遗迹，成功应对挑战。解决方案：Artec Leo、Artec Ray II、Artec Studio 效果：每块墓碑都经过Artec Leo的详尽扫描，生成精准的3D模型。Artec Ray II助力团队处理扫描教堂整个地板的海量数据。随着项目接近尾声，这座具有重要历史意义的教堂也焕然一新。透过VR眼镜即可虚拟漫步其中，细赏

沪敖3D 2024-12-26

挂靠国企的私企相对不挂靠的有什么优势？

挂靠国企的私企相对于不挂靠的私企，主要有以下几个优势： 1.增强市场信任：国企通常在公众心目中具有较高的信誉和稳定性，私企挂靠国企后，能够借助国企的品牌影响力，增强自身的市场信誉和公众认可度。 2.资源共享：国企在资金、技术、人才等方面通常拥有较为丰富的资源。私企通过挂靠国企，可以更容易地获得这些资源的支持，从而加速自身的发展。 3.政策扶持：国企作为国家经济的重要支柱，往往能够享受到更多的政策优惠和支持。私企通过与国企的合作，可以间接受益于这些政策红利，降低经营成本，提高盈利能力。 [图片] 4.风险分

bili_1670512731 2024-12-27

乳胶再生胶生产橡胶减震垫配方，保证质量降低原料成本

橡胶减震垫是一种广泛应用于汽车、机械、建筑等领域的重要零部件，其主要作用是减少震动和噪音，保护设备和结构的稳定性和安全性。然而传统的橡胶减震垫生产过程中，使用的原材料成本较高，而且生产过程中会产生大量的废弃物，对环境造成不良影响。为了解决这些问题，使用乳胶再生胶生产橡胶减震垫配方成为了一种新的解决方案。乳胶再生胶是一种由废旧天然橡胶制品经过加工处理后得到的再生橡胶，其具有良好的物理性能和化学稳定性，可以广泛应用于橡胶制品的生产中。HONG~YUN乳胶再生胶生产橡胶减震垫配方的优势在于，可以降低原

鸿运再生胶 2024-12-27

你就是东方圣人　山林子自然道德智慧教育慧商

[图片] 你就是东方圣人（中中道德慧智教育诗）你就是东方圣人只缘妄中明山北河南湖畔泉城山林子甲辰丙子甲子甲子聚狮林

山林子道德慧智 2024-12-27

Huggy Lingo: 利用机器学习改进 Hugging Face Hub 上的语言元数据

推荐体验

相关资讯

重磅｜ Falcon 180B 正式在 Hugging Face Hub 上发布！

Google 发布最新开放大语言模型 Gemma 2，现已登陆 Hugging Face Hub

重要变更 | Hugging Face Hub 的 Git 操作不再支持使用密码验证

Hugging Face 的 Transformers 库学习总结

Hugging Face NLP课程学习记录 - 2. 使用 Hugging Face Transformers

近期资讯

从唐诗看科举一：画眉如何识深浅——公平竞争背后的博弈

【环保喷雾除尘设备】-山东艾蓝装置-制造厂家

赫鲁晓夫的泥潭：1953-1964年的苏维埃政权 4-3A

认知战认知作战：解读2000年小布什戈尔总统选举争议的策略博弈

250年前东归中国的土尔扈特人，现在怎么样了

特朗普等不及了……

Artec Leo与Artec RayII强强联手创建逼真文物数字孪生-沪敖3D

挂靠国企的私企相对不挂靠的有什么优势？

乳胶再生胶生产橡胶减震垫配方，保证质量降低原料成本

你就是东方圣人　山林子自然道德智慧教育慧商

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响