2019.04.04 丨 msup

建议收藏:机器学习顶级数据资源TOP 9盘点

2019.04.04 丨 msup

在机器学习任务实施前,如何快速寻找到可用数据集,是令每一位研究人员最头痛的事情。本文为大家列举了八大主流数据集来源及一大创新峰会,不仅包含大量的数据集信息,而且包含了描述、用法以及一些实施案例等。


1、Kaggle数据集

Kaggle数据集地址
https://www.kaggle.com/datasets

这是我最喜欢的数据集之一,每个数据集都对应于一个小型社区,你可以在其中讨论数据、查找公共代码,或者在其中创建自己的项目。这里包含了大量不同类型、不同结构的数据集内容。同时,还可以在其中获取到与每个数据集关联的资料,其中包含了许多数据科学家们提供的数据集分析笔记等。


2、Amazon数据集

AWS开放数据地址

https://registry.opendata.aws/

这个数据集中包含了不同领域的数据内容,例如:公共交通、生态资源、卫星图像等。同时提供了搜索功能,以帮助用户找到所需的数据集,还有各种数据集的描述信息以及用例,非常易于使用。


数据集存储在Amazon Web Services(AWS)资源中,对于使用AWS构建自己机器学习实验的用户来说,传输速度将非常块。


3、UCI机器学习数据集

UCI数据集地址:
https://archive.ics.uci.edu/ml/datasets.html



这个数据集来自于加州大学信息与计算机科学学院,其中包含了100多个数据集。根据机器学习问题的类型对数据集进行分类,可找到单变量或多变量时间序列数据集,以及分类、回归或推荐系统的数据集。


4、Google数据集搜索引擎

Google数据集搜索引擎

https://toolbox.google.com/datasetsearch



在2018年末,Google推出了数据集搜索服务。这是一个可以按名称搜索数据集的搜索引擎,目标是为数万个不同数据集存储库提供统一搜索入口,非常好用。


5、微软数据集


在2018年7月,微软与外界研究社区一起,发布了微软研究开发数据。

微软数据集地址:
https://msropendata.com/


它包含了云服务器中的数据存储库,致力于促进全球研究社区的协作,并在其中提供了一系列用于已发表研究的数据集内容。


6、Awesome开放数据集收藏列表

Awesom Public Datasets
https://github.com/awesomedata/awesome-public-datasets

本数据集列表中,按主题整理了大量的数据集内容,例如:生物学、经济学、教育等。其中列出的大多数数据集都是免费的,但在使用任何数据集之前,均需检查数据集的许可要求。


7、政府数据集


许多国家均在网络上提供了多种公众可用的政府数据集内容,例如:

欧洲政府数据集
https://data.europa.eu/euodp/data/dataset
美国政府数据集
https://www.data.gov/
新西兰政府数据集
https://catalogue.data.govt.nz/dataset
印度政府数据集
https://data.gov.in/
北爱尔兰公共数据集
https://www.opendatani.gov.uk/


8、VisualData数据集

VisualData数据集

https://www.visualdata.io/

视觉数据包含了一些用于构建计算机视觉模型的优秀数据集,用户可通过某个CV主题查询,例如语义分割、图像标题、图像生成、自动驾驶汽车等内容。


以上内容来自专知。

9、参与A2M峰会


除了找到特定的数据集来解决各种机器学习是一个难点外,相信从业者的你们还有类似于如何针对业务特点进行技术选型?如何从0到1构建机器学习平台?如何对平台进行持续迭代优化?在此实践过程中又会踩哪些坑?等问题,那么不妨来A2M峰会找找思路,大会设置了“机器学习”专题,我们邀请了在2018年做出重大突破的一线国内外技术团队来分享他们的最新实践。希望通过本专题的分享,对大家的实际业务有很大的借鉴意义。目前已确认的话题如下:



5月18-19日,来自Microsoft、BAT、京东、Uber、IBM、蚂蚁金服、小米、京东、Keep、知乎等公司的近80位国内外顶级人工智能专家及一线技术大咖 、1000+技术从业者将云集A2M峰会现场,共同聚焦 20个热门专题。目前大会日程已上线,部分精彩议题如下:


5月18日



5月19日



现在报名还可享原价的基础上直接立减870元的优惠,团购还可享更多优惠,此外体验票席位有限!点击“此处”,快速报名吧!

媒体联系

票务咨询:赵丹丹 15802217295

赞助咨询:郭艳慧 13043218801

媒体支持:景    怡 13920859305

活动详情

提交需求