类似于 Hugging Face 的创业公司有 ModelScope(魔搭社区)。Hugging Face 是一家成立于纽约的 AI 研究公司,以其开源项目 Transformers 库而闻名,该库聚焦于自然语言处理和机器学习,并支持超过 100 种语言的模型。Hugging Face 强调社区协作,致力于使 AI 更加民主化,为研究人员和开发者提供强大的工具,以推动人工智能技术的进步和应用。ModelScope 是由中国的科技巨头阿里巴巴集团旗下的阿里云推出的一个开源平台,专注于提供各种 AI 模型,包括但不限于自然语言处理、计算机视觉和音频处理。ModelScope 旨在简化 AI 模型的开发和部署过程,使技术更加透明和容易访问,特别是为中国的开发者和研究机构提供支持。这两个平台可以简单理解为开源大模型的仓库,从这些平台可以下载到各种开源的大模型。它们的区别可以类比于 github 和 gitee 的区别:Hugging Face 是国际上的平台,而 ModelScope 则是国内的平台。
Hugging Face首席执行官Clement Delangue在美国国会科学委员会的听证会上表示,开放科学和开源人工智能对激励和与美国的价值和利益高度一致。Delangue还指出,今天的人工智能进展是由开放科学和开源推动的,没有美国发明的开源PyTorch、Tensorflow、Keras、transformers和diffusers,美国可能不会成为领先的人工智能国家。Hugging Face是一个快速增长的纽约初创公司,去年估值达到20亿美元,成为开源代码和模型的中心,并成为开源人工智能社区的领导者。
在我们下载大模型之前,先来介绍两个重要的开源社区:HuggingFaceModelScope(魔搭社区)HuggingFace是一家成立于纽约的AI研究公司,以其开源项目Transformers库而闻名,该库聚焦于自然语言处理(NLP)和机器学习,并支持超过100种语言的模型。HuggingFace强调社区协作,致力于使AI更加民主化,为研究人员和开发者提供强大的工具,以推动人工智能技术的进步和应用。ModelScope(魔搭社区)是由中国的科技巨头阿里巴巴集团旗下的阿里云推出的一个开源平台。该平台专注于提供各种AI模型,包括但不限于自然语言处理、计算机视觉和音频处理。ModelScope旨在简化AI模型的开发和部署过程,使技术更加透明和容易访问,特别是为中国的开发者和研究机构提供支持。这两个平台可以简单理解为开源大模型的仓库。从这些平台,我们可以下载到各种开源的大模型。他们的区别可以类比于github和gitee的区别:HuggingFace是国际上的平台,而ModelScope则是国内的平台。1.创建下载大模型的Python脚本文件:download.py1.执行Python脚本,下载大模型出现如下界面则代表模型开始下载中,预计下载5分钟1.下载完成
? Hugging Face ?✨ StarCoder「May the source be with you!」如果我们呼吁开源发展,那么Hugging Face应该是另一个引领者——他们是当之无愧的社区积极推动者!在星战日(May the force be with you),HF与ServiceNow合作发布了StarCoder,完全开源的代码生成模型。对于程序员来说,这真的非常令人兴奋,HuggingFace甚至声称它的性能超过了用于训练OpenAI的GitHub Copilot的模型。从数据道德的角度来看,StarCoder是在一个名为The Stack的开放数据集上进行训练的,该数据集具有1900万个完全开放的代码库和6TB代码——但最好的一点是它可以与VSCode集成。? https://twitter.com/BigCodeProject/status/1654174951006404610? HuggingChatHugging Face也没忍住加入了Chatbot的开发行列。他们发布了名为HuggingChat的开源聊天机器人,拥有Web界面和API ——虽然还没有达到大厂的水平,但毕竟它是免费的。来看看HuggingChat + StarCoder的表现?? https://huggingface.co/chat/