안녕하세요! 오늘은 AI 프로젝트 활동시 사용할 수 있는 데이터셋에 대해 알아보겠습니다.
그중에서도 여러 데이터셋을 받아올 수 있는 몇가지 데이터 포털에 대해 알아보겠습니다.
https://www.tensorflow.org/datasets?hl=ko
TensorFlow Datasets
TensorFlow와 함께 사용할 준비가 된 데이터 세트 모음입니다.
www.tensorflow.org
현재까지 연구 및 학술 분야에서 가장 활용도가 높은 데이터 포털입니다.
대부분의 데이터셋들이 학회에서 공개되었거나, 무수히 많은 인용을 받은 데이터입니다.
AI-Hub
AI 허브 데이터 검색 추천검색어
www.aihub.or.kr
공공데이터 및 국책사업 등의 경로를 통하여 수집된 데이터셋을 제공하는 데이터 포털입니다.
한국인이 대한민국 영토 내에서 데이터셋을 사용할 경우 영리 목적 사용까지 허가됩니다.
각각의 데이터셋에 대한 상세 정보와 데이터 설명서 및 가이드와 모델까지도 제공하고 있습니다.
하지만, 데이터의 해외 반출 금지라는 라이선스 조항 때문에, 연구개발 결과물을 증명해야 하는 현재의 AI 트렌드에는 적합하지 않은 데이터 포털입니다. 따라서 교육 목적이나 성과를 과시할 필요가 없는 연구 분야에 사용하길 권장합니다.
공공데이터 포털
국가에서 보유하고 있는 다양한 데이터를『공공데이터의 제공 및 이용 활성화에 관한 법률(제11956호)』에 따라 개방하여 국민들이 보다 쉽고 용이하게 공유•활용할 수 있도록 공공데이터(Datase
www.data.go.kr
공공기관이 수집한 데이터를 제공하는 데이터 포털로, 대부분 자유롭게 상업적 사용이 가능합니다.
과거의 데이터는 파일로 제공하며, 매일 갱신되는 데이터는 API를 통해 제공합니다.
https://webscope.sandbox.yahoo.com/catalog.php?datatype=i&did=67
Webscope | Yahoo Labs
Outreach > Datasets > Datasets G4 - Yahoo! Network Flows Data, version 1.0 (multi part) (Hosted on AWS) Yahoo! network flows data contains communication patterns between end-users in the large Internet and Yahoo servers. A netflow record includes timestamp
webscope.sandbox.yahoo.com
야후에서 수집한 웹 사이언스 분야 데이터셋입니다. 특히 자연어 데이터가 풍부합니다.
이상으로 위 4가지 데이터 포털에 대해 알아보았습니다.
다음에는 영상 데이터셋에 대해 알아보겠습니다!
'참고 > IT' 카테고리의 다른 글
| 데이터셋 - 자세인식 (1) | 2022.09.21 |
|---|---|
| 데이터셋 - 안면인식 (0) | 2022.09.15 |
| 데이터셋 - 의미론적 연관성 (0) | 2022.09.15 |
| 데이터셋 - 탐지 및 표지 (0) | 2022.09.14 |
| 데이터셋 - 이미지 분류 (0) | 2022.09.13 |