EleutherAI опубликовала набор данных Common Pile v0.1 для обучения искусственному интеллекту
Переведено автоматически
CreatorИсследовательская организация по искусственному интеллекту EleutherAI опубликовала огромный набор данных. Состоит из лицензированного и открытого текста Общий Pile v0 1 в Поскольку он довольно всеобъемлющий, прогнозируется, что у компаний ИИ есть набор данных, который способствует развитию.
Лаборатория искусственного интеллекта EleutherAI
EleutherAI является некоммерческой исследовательской организацией AI. OpenAI можно назвать open source. В начале сообщество серверов Discord, открытое для обсуждения GPT-3, превратилось в исследовательскую организацию, которая занимается крупномасштабными исследованиями в области искусственного интеллекта. В последние дни сообщество, которое придумывает набор данных под названием Common Pile v0.1, вносит большой вклад в развитие.
Общий набор данных Pile v0.1
Набор данных Common Pile v0.1 был разработан в течение двух лет в сотрудничестве с несколькими академическими учреждениями наряду с Poolside, Hugging Face и другими инициативами ИИ. Этот набор данных в общей сложности размером 8 терабайт был создан на поезде двух новых моделей ИИ под названием EletheurAI, Comma v0.1-1T и Comma v0.1-2T. Эти две модели, как утверждается, выполняют одну и ту же производительность с отличными моделями искусственного интеллекта.
Некоторые компании, работающие с ИИ, расположенные в OpenAI, были смешаны с некоторыми случаями по той причине, что данные, защищенные авторским правом, использовались во время обучения. Стелла Бидерман, директор EleheurAI, пост в блоге Исследователи в некоторых компаниях писали, что такие случаи вредят прозрачности компаний, а некоторые компании не могли опубликовать свои исследования из-за своих случаев.
Набор данных Common Pile v0.1 можно загрузить с платформы разработки ИИ Hugging Face и GitHub. Этот набор данных также был создан из 300 000 источников и юридических экспертов. EleutherAI также использовала Whisper, модель OpenAI с открытым исходным кодом для публикации аудиоконтента.
Текущие цели
EleutherAI является важным шагом для создания большого набора данных с открытым исходным кодом, но в нем также говорится о будущем. Они также указывают на то, что они готовы раскрывать больше данных, производить лучшие версии. Они также стремятся внести свой вклад в модели Comma v0.1, используя данные после обучения.
Creator
