허깅페이스, 다운로드 가능 AI 모델 100만개 돌파

AI 플랫폼 허깅페이스(Hugging Face)에서는 메타 Llama나 구글 Gemma 2 등 수많은 AI 모델이 공개되고 있다. 이런 허깅페이스에서 다운로드 가능해진 AI 모델 수가 2024년 9월을 기준으로 100만 개를 돌파했다고 보고됐다.

지난 2022년 3월 조사 시작 시점에는 허깅페이스에서 다운로드 가능한 AI 모델 수가 완만하게 증가했지만 2023년 이후 그 수는 지수함수적으로 증가했다. 2024년 9월 1일 기준으로 119만 381개에 이르는 AI 모델이 공개되어 있다.

1M Models on @huggingface Hub 📈

Models are going exponential month over month and September isn’t even over yet 🤯 pic.twitter.com/1NGRA4tqxN

— Caleb (@calebfahlgren) September 26, 2024

허깅페이스에서 다운로드 가능한 AI 모델 목록을 보면 메타와 엔비디아, 마이크로소프트 등 다양한 기업이 자체 AI 모델을 배포하고 있다.

AI 학습에 사용되는 데이터셋도 많이 만들어지고 있으며 2022년 4월 시점에는 670건이었지만 2024년 9월에는 1만 7,000건 이상 데이터셋이 만들어졌다.

기계학습을 활용한 데모 스페이스(Space) 수를 보면 2023년 8월 2만 2,227개로 정점에 도달했지만 그 후 급락했다. 하지만 다시 점차 그 수를 늘려가고 있으며 2024년 9월 시점 1만 7,291개가 공개되어 있다고 한다.

2024년 8월 말부터 9월 26일까지의 기간 동안 다운로드된 AI 모델에 대한 사용 목적을 보면 입력된 단어를 예측하는 Fill-Mask와 음성을 분류하는 Audio-classification이 전체 4분의 1을 차지하고 있다.

We passed 5 million users.

🥳That’s 5 million of you who have signed up on the Hub 🚀 thank you for contributing to the ecosystem and making open Machine Learning happen!

We’re just getting started 🤗 pic.twitter.com/8Ls3kZXdTg

— Hugging Face (@huggingface) August 19, 2024

또 지난 30일 동안 다운로드된 AI 모델을 개발 시 사용된 신경망 아키텍처별로 나누면 구글 트랜스포머가 전체 4분의 3 이상을 차지하고 있는 것으로 밝혀졌다. 그 밖에 허깅페이스는 2024년 8월 20일 사용자 수가 500만 명을 돌파했다고 보고했다. 관련 내용은 이곳에서 확인할 수 있다.