ai-starthon / ai_starthon2019 Goto Github PK

Informations

CLI

• OS (Mac, Windows, Linux, etc) and version:
• client version(please show nsml --version):

WEB

• Brower (chrome, firfox, etc):
• URL:

What is your NSML login ID?

Question
문제 2번(태양광 발전 예측)문제가 아직 올라오지 않았는데, 언제 올라오게 될지 궁금합니다.

참가팀 규모가 200팀을 넘었습니다. 현재, 준비된 자원이 부족할 것으로 예상됩니다.
최대한 많은 자원을 제공하려고 노력중입니다.
현재, 설정된 정책은 아래와 같습니다.

대회 기간중 제공되는 credit (1 credit = 1GPU를 1분간 사용, 2GPU 사용시 1분당 2credit 소모)

• 모든 팀에 공통적으로 14400 credit 지급( 10일 동안 1개 GPU를 계속 사용할 수 있는 양)
• 제약 사항: 동시 사용 GPU수 1개로 제한(대회 시작 후, 자원 상황에 따라서 증가 검토)
• submit 간격: 마지막 submit 이후 1시간 후 가능.
• submit 시간: 최대 1시간 이내 submit이 완료되어야함.(경과시 timeout 처리 무효 처리됨)

고려해야할 사항

• credit이 있어도 가용 GPU가 없으면 job을 실행할 수 없음.
• credit이 없으면, submit을 실행할 수 없음.
• submit시 credit이 소진됨(submit 과정에서 credit이 0이되어도 끝까지 실행)
• 주말과 심야시간에 사용자가 몰리는 경향이 있음
• GPU 자원이 없는데, 지속해서 job을 실행하면 10분간 기다려야 함.(DDOS 방지)
• GPU 사용율이 줄어들면(기준치 70%), 동시 사용 GPU 수를 늘릴 예정.
• credit이 모두 소진되어 submit을 못하는 사용자 발생하면, submit 가능하도록 매일 1 credit씩 일괄 지급 예정.
• 마감시간 임박하여 submit 오류로 인한 재조정은 없으며, 하드웨어 장애, 시스템 장애, 리소스 부족으로 인한 submit 오류 사유는 무시됨.

Informations

CLI

• OS (Mac, Windows, Linux, etc) and version: Mac
• client version(please show nsml --version):

WEB

• Brower (chrome, firfox, etc):
• URL:

What is your NSML login ID? eagle705

Question
baseline 실행하려고하는데 GPU 에러뜨네요. 이거 어떻게 해야되나요?

$ nsml run -d 16_tcls_movie -e main.py
INFO[2019/07/22 20:05:49.901] .nsmlignore check - start
INFO[2019/07/22 20:05:49.904] .nsmlignore check - done
INFO[2019/07/22 20:05:49.932] file integrity check - start
INFO[2019/07/22 20:05:49.933] file integrity check - done
INFO[2019/07/22 20:05:49.934] README.md 929 B - start
INFO[2019/07/22 20:05:49.934] README.md 929 B - done (1/9 11.11%) (929 B/24 KiB 3.86%)
INFO[2019/07/22 20:05:49.934] data_loader.py 871 B - start
INFO[2019/07/22 20:05:49.935] data_loader.py 871 B - done (2/9 22.22%) (1.8 KiB/24 KiB 7.49%)
INFO[2019/07/22 20:05:49.935] dataset.py 4.2 KiB - start
INFO[2019/07/22 20:05:49.935] dataset.py 4.2 KiB - done (3/9 33.33%) (6.0 KiB/24 KiB 25.59%)
INFO[2019/07/22 20:05:49.935] evaluation.py 1.8 KiB - start
INFO[2019/07/22 20:05:49.935] evaluation.py 1.8 KiB - done (4/9 44.44%) (7.8 KiB/24 KiB 33.22%)
INFO[2019/07/22 20:05:49.935] kor_char_parser.py 3.9 KiB - start
INFO[2019/07/22 20:05:49.936] kor_char_parser.py 3.9 KiB - done (5/9 55.56%) (12 KiB/24 KiB 49.89%)
INFO[2019/07/22 20:05:49.936] main.py 7.0 KiB - start
INFO[2019/07/22 20:05:49.936] main.py 7.0 KiB - done (6/9 66.67%) (19 KiB/24 KiB 79.75%)
INFO[2019/07/22 20:05:49.936] models.py 3.5 KiB - start
INFO[2019/07/22 20:05:49.936] models.py 3.5 KiB - done (7/9 77.78%) (22 KiB/24 KiB 94.64%)
INFO[2019/07/22 20:05:49.936] nsmlignore 4 B - start
INFO[2019/07/22 20:05:49.936] nsmlignore 4 B - done (8/9 88.89%) (22 KiB/24 KiB 94.65%)
INFO[2019/07/22 20:05:49.937] setup.py 1.3 KiB - start
INFO[2019/07/22 20:05:49.937] setup.py 1.3 KiB - done (9/9 100.00%) (24 KiB/24 KiB 100.00%)
...Rejected: The GPU limit was exceeded (max: 1, usage: 1, requested: 1)
Since cluster does not have enough computing resources, job has been aborted. Please retry later
Error: No machine available that meets ALL your request such as CPU, RAM, Disk, GPU or its driver version
FATA[2019/07/22 20:05:50.699] Internal server error

현재 학교 내 산학협력단에 문의하지 않고 개인적으로 팀을 꾸려 신청한 상황인데 이런 경우 최종 본선 진출 및 20팀 이내 선발에서 제외되나요?

#28번 이슈를 보고 저희도 같은 증상이 있어서 nsml rm -f 명령어를 써보려했지만 안됩니다.
해결 방법이 있을까요?

아래는 에러 메세지입니다
Stopping team_149/None/1 is failed
Error: Session error: 'Failed to stop session [team_149/None/1]'
FATA[2019/07/22 19:13:55.611] Internal server error

@nsml-admin

이번에 3년이상 스타트업 자격으로 지원한 초록소프트 신승윤 입니다.

다름이 아니고 이번에 회사 대표님은 참여를 안하고 직원끼리만 대회에 참여를 하게 되었습니다.

이런경우 자격을 유지할 수 있는지, 꼭 대표님이 팀원에 포함이 되어야 3년이상 스타트업 자격으로 대회참여가 가능한건지 궁금합니다.

지금이라도 대표님을 팀원에 추가할 수 있을까요?

안녕하세요 해당일자에 팀원 전원이 지방출장을 가게 되어 관련 발표자료 링크 공유가 가능하실지 문의드립니다.

20_scls_stt baseline code가 안보이는데,
STT 문제가 최종 문제에서 제외된 건가요?

아이디: Yoogeonhui
팀 명: zezedu
이름: 유건희

제 아이디가 등록되지 않은 것 같습니다.

팀명:blowfish
이름:박지호
Id: jihobak
‘jiho bak’-> jihobak입니다

아이디어 챌린지와 경진대회와의 상관관계를 모르겠습니다.
사업화 지원 대상자를 가리기 위해, 경진대회의 점수와 아이디어 챌린지의 점수를 합산하는 것입니까?

아이디어 챌린지의 구체적인 진행 과정을 설명해 주시기 바랍니다.

요강에 "최종 20팀 선발 (예비 창업자 15팀, 기업팀 5팀)" 이라고 되어있는데, 이 말은 리그 1에서 15팀, 리그 2에서 5팀을 뽑는 다는 말인가요?

그렇지 않다면, 리그 2에서 몇 개의 팀을 뽑게 되는 건가요?

사용자 일괄 등록 과정에서 일부 사용자의 확인이 늦어져 전체 등록이 지연되었습니다.
현재, 대부분의 사용자가 정상 등록되어 사용가능한 상태입니다.
로그인에 문제가 있으신 분은 아래 "github ID 확인" 게시글을 참고하시어 문의주시기 바랍니다.

접속이 지연되어 죄송합니다.

현재 깃허브에 올라온 데이터셋 폴더에 존재하는 main.py 형식을 그대로 따라야 하는건가요 ?
케라스를 사용해서 코드를 작성하려하는데
어느부분을 지우고 소스코드를 짜서 서버에 전송해야하는지 잘 모르겠습니다.

안녕하십니까?
저희 팀원들이 그룹 2로 참여하고자 합니다.

(1) 팀원들 중에는 반드시 창업자가 포함되어야하나요? 아니면 사원들간의 참석이 가능한가요?
(2) 팀원들 중 전문연구요원 / 산업기능요원등으로 현재 휴학 중인 학생 사원이 포함될 수 있나요?
(3) 회사에 입사예정인 팀원도 팀원으로써 참석이 가능할까요?

모두의비전, 1그룹입니다. 3_cls_crane2 현재시각 랭킹 1위인데, 전체 랭킹에 아예 반영되지 않고 있습니다.

랭킹 1위 , 0.0860692102928 | team_284/3_cls_crane2/2/133

안녕하세요 NSML 관련 질문을 드리려고 합니다.

각 테스크마다 요구로 하는 전처리나 외부 라이브러리들이 다를 것 같습니다.
몇몇 라이브러리들은 단순히 python package로 설치 되지 않는 경우도 있는데,
현재 대회에 적용된 NSML 구조를 보면 install_requirements=[...] 를 통한 package install 외에는 지원하지 않는 것 같습니다.

혹시 NSML 에 사용되는 docker image를 custom 하게 변경할 수 있나요?
Dockerfile이나 외부 docker image를 사용할 수 있는지 궁금합니다.

감사합니다.

안녕하세요.
nsml과 베이스라인 코드 오픈 이후 테스트 중인데요.
nsml run 이후 아래와 같이 session이 보이는 상태에서 nsml stop을 하니 fail이 됐다고 나오는데요.
해결 방법이 없을까요?
에러 msg는 아래와 같습니다.

12_idet_food_baseline>nsml ps

Name Created Args Status Summary Description # of Models Size Type

team_23/12_idet_food/2 Not created yet Allocated 0 0 normal

12_idet_food_baseline>nsml stop team_23/12_idet_food/2
Stopping team_23/12_idet_food/2 is failed
Error: Session error: 'Failed to stop session [team_23/12_idet_food/2]'
time="2019/07/22 18:32:14.345" level=fatal msg="Internal server error"

8월 중순까지 해외에 있어서 참석이 힘들것 같은데 이런경우 대회 참여가 제한되나요?

안녕하세요. pretrained model과 관련된 질문이 있어 글 남깁니다.

1. 사전교육 때 pretrained model은 사용하지 못한다고 하셨는데, 이미지 복원(inpainting) 등의 문제에서 loss를 계산할 때 feature map 간의 loss 계산을 위해 pretrained vgg network 등을 사용하는 경우가 있습니다. 대회의 문제 해결을 위한 핵심 model의 pretrained weights 사용 뿐만 아니라 이러한 (loss 계산을 위한) 경우에도 pretrained model의 사용이 금지되는지 궁금합니다.

2. 또한 pretrained model을 파이썬에서 라이브러리 형태로 쉽게 가져다 쓸 수 있는데 어떠한 방식으로 관련 부정행위 탐지를 하시는지 궁금합니다. 명확한 공지가 있으면 좋을 것 같습니다.

문제 선택수 및 변경 방법 / Submit 가능 횟수

홈페이지 설명에는 "최대 3개 주제 선택" 으로 되어 있는데
문제기준으로는 3개이상도 도전 가능한 것인지요?
3개 문제 이상 참여도 가능하고 기간중 중간에 변경도 가능하다면
도전 문제 변경하는 방법은 무엇이며, 3개이상 참여시 결정되는 방법은 무엇인지요?

submit 은 기간중 1일 또는 총기간동안 횟수 제한이 있는지요?

안녕하세요. 저희 회사는 4년차 스타트업입니다.
그런데 관련 질문에서 스타트업 창업자가 멤버에 속해있지 않으면 예비창업자로 간주한다는 답변을 봐서요 질문드립니다.

1. 사업등록증에 있는 회사 대표님이 팀원에 속해있지않으면 사업자등록증을 보내도 예비창업자로 간주되어 대회에 참여하게 되는지 궁금합니다.

2. 그렇다면 혹시 지금이라도 대표님을 팀원으로 넣어서 진행할 수 있는지 궁금합니다. 아니면 4년차 스타트업기업이지만 대표님이 팀원에 속해있지않으면 예비창업자로서 대회에 참여할 수 있는지 궁금합니다.

nsml run으로 실행하면 원격에서 실행되므로 현재 활성화된 session정보가 필요합니다.
그래야 중단하거나 자원 반납이 필요할 때 nsml rm을 이용할 수 있습니다.

혹시 nsml 활성화된 모든 session들 조회하는 방법이 있는지요?

Informations

CLI

• OS (Mac, Windows, Linux, etc) and version: Ubuntu 18.04.2
• client version(please show nsml --version): 2019-07-22T20:39:08+09:00
• Full command line: nsml run -d 1_reg_dust -i

WEB

• Brower (chrome, firfox, etc):
• URL:

What is your NSML login ID?
escherlee

What is name of session in problem? (bug message or screenshot)
INFO[2019/07/22 22:38:51.148] .nsmlignore check - start
INFO[2019/07/22 22:38:51.148] .nsmlignore check - done
INFO[2019/07/22 22:38:51.502] file integrity check - start
INFO[2019/07/22 22:38:51.502] file integrity check - done
INFO[2019/07/22 22:38:51.503] README.md 872 B - start
INFO[2019/07/22 22:38:51.503] README.md 872 B - done (1/5 20.00%) (872 B/9.5 KiB 9.01%)
INFO[2019/07/22 22:38:51.503] data_loader.py 1.0 KiB - start
INFO[2019/07/22 22:38:51.503] data_loader.py 1.0 KiB - done (2/5 40.00%) (1.9 KiB/9.5 KiB 20.07%)
INFO[2019/07/22 22:38:51.503] evaluation.py 2.3 KiB - start
INFO[2019/07/22 22:38:51.503] evaluation.py 2.3 KiB - done (3/5 60.00%) (4.2 KiB/9.5 KiB 44.48%)
INFO[2019/07/22 22:38:51.503] main.py 5.0 KiB - start
INFO[2019/07/22 22:38:51.503] main.py 5.0 KiB - done (4/5 80.00%) (9.2 KiB/9.5 KiB 97.77%)
INFO[2019/07/22 22:38:51.503] setup.py 216 B - start
INFO[2019/07/22 22:38:51.504] setup.py 216 B - done (5/5 100.00%) (9.5 KiB/9.5 KiB 100.00%)
.Error: An error occurred while initializing user information. Please contact dev team
FATA[2019/07/22 22:38:52.259] Internal server error

Steps to reproduce the problem

What is the expected behavior?

Suggested solutions

Github ID를 사용한다는 말만 있을 뿐

팀을 구별하기 위한 별도의 내용이 공지되어 있지 않은데요

팀원들이 개별적으로 자신의 ID로 Submit을 하면 어떻게 되는 건가요?

주어진 문제를 풀기위해 제공되는 데이터에 추가로 데이터를 추가하는 것이 가능한지 문의드립니다.

자원 상황이 여유로워 동시 사용 GPU 수를 늘립니다.

현재 다음과 같은 문제를 겪고 있습니다.

INFO[2019/07/22 17:16:25.960] could not login: rpc error: code = DeadlineExceeded desc = context deadline exceeded
FATA[2019/07/22 17:16:25.960] please check your network connectivity by using 'ping nipa-cli.nsml.navercorp.com' and 'telnet nipa-cli.nsml.navercorp.com 18553'

17시가 지났는데 아직 접속할 수 없는건지 알고싶습니다.

AI개발에서 EDA(Exploratory Data Analysis)가 필수입니다.

데이터셋 비공개는 이해했습니다.
그러나 사전 데이터 분석을 위해 소량이라도 제공을 요청드립니다.

다운로드 사이트가 막혀있고, 맥북에서의 명령어만 나와있는데
윈도우 컴퓨터에 다운로드 하는 방법이 따로 있나요?

본 경진대회에서 사용하는 NSML platform 계정은 github.com의 3rd party 인증을 사용하고 있습니다. NSML에 login 및 train, submit 모두 NSML-CLI를 통해서 이루어지며, 이러한 작업을 위해서는 github의 ID가 필수입니다.
따라서, 팀별 최소 한명은 github ID가 있어야합니다.

아래는 본인의 github ID를 확인하는 방법입니다. (github.com ID는 무료 생성 가능)
github의 ID는 github.com에 login하신 후, 자신의 profile 페이지에서 확인이 가능합니다.

아래 붉은 박스가 본인의 github ID입니다. 대/소문자의 구분이 있으니 제출시 주의하시기 바랍니다. 기 제출한 본인의 github ID에 오류가 있을 경우, 메일로 정정을 요청하시기 바랍니다.

22일 월요일 21시에,

세션을 삭제 할수 있는 nsml rm [session name] 명령어가 추가될 예정입니다.

업데이트는 약 10~20분간 진행될 예정이며,

순간적으로 새로운 명령어가 실행되지 않거나, log -f 명령은 재접속이 필요한 작업입니다.

감사합니다.

사전교육 자료가 홈페이지에 올라온다고 되어있었는데,

혹시 사전교육 자료를 언제쯤 받아볼 수 있을지 궁금합니다.

베이스라인 코드는 문제마다 다르다고 들었지만 pytorch 혹은 tensorflow라고 들었습니다.
tensorflow code가 안보이는데.. 나중에 공개 예정인지 아니면 pytorch로만 코드를 짜야할지 알려주셨으면 합니다~

Informations

CLI

• OS (Mac, Windows, Linux, etc) and version:
• client version(please show nsml --version):

WEB

• Brower (chrome, firfox, etc):
• URL:

What is your NSML login ID?

Question

저번 AI 해커톤의 경우에는 참가자의 절반은 깃허브 랭킹 고순위자로 선발하고, 참가자의 절반은 랜덤으로 선발하였는데,
이번에도 동일한 방법으로 서류심사가 이루어지는지 알수있을까요?

아래의 "상세 참가 자격 보기" 링크를 따라가 보면, (사업화 지원 대상)에는 "창업 후 3년 미만의 기업" 이라고 되어 있는데, "3년 이상의 기업"은 경진대회만 참가 할 수 있고, 사업화 지원 신청은 할 수 없는 건가요?

https://docs.google.com/document/d/1amGM9zZI77Jshdi1TnTNjFHNZNyFeUoOSCB_9hDXoP0/edit?usp=sharing

지원 자격 상세

- (경진대회 참여자격) 국내외 기업, 대학, 대학(원)생 연구기관, 산‧학‧연 컨소시엄 등

- (사업화 지원 대상) 경진대회 상위 입상 팀 중, AI 산업 활성화 및 창업 촉진 목적에 따라 사업화 지원 사업 제출서류 접수 마감 기준 인공지능 기술을 활용한 스타트업, 벤처‧중소기업 또는 예비 창업자등을 기준으로 함
* 벤처·중소기업은 창업 후 3년 미만인 기업임
* 예비 창업자의 경우 사업화 지원사업 수행계획서 접수 전까지 창업(사업자등록 및 법인 설립)이 가능한 자
* 대학(원)생의 경우 소속 대학 산학협력단을 통해 참여하는 경우 지원 가능


- 외국 소재 기관(기업, 대학, 연구소 등)의 경우 경진대회는 자유롭게 참가 가능하나, 사업화 지원을 받기 위해서는 주관기관 대표이사가 대한민국 국적자인 벤처‧중소기업을 주관기관으로 컨소시엄 형태로 참여하여야 함

nsml 로그인이 안됩니다.

nsml client에서는 "login failed: You are not a registered user" 라고 나옵니다.

login 시도와 동시에 github에서 메일로 "Please verify your device" 제목으로

다음과 같은 내용이 전달 되고 있습니다.

A sign in attempt requires further verification because we did not recognize your device. To complete the sign in, enter the verification code on the unrecognized device.

Device: Safari on Unknown
Verification code: ******

교육시작 및 종료시간이 언젠지 궁금합니다

현재, 전체 리소스가 여유로워 동시 사용 GPU수를 1개 늘렸습니다.

내일 상황을 리소스 상황을 봐서 다시 조정될 수 있으니, 참고부탁드립니다,

Question

Jupyter notebook 사용이 가능한가요?
가능하다면 방법을 알고 싶습니다

지원 자격 상세 내용에 따르면 사업화 지원 대상으로 창업 후 3년 미만 기업으로 되어 있는데, 창업 3년 이상 기업은 사업화 지원 신청 대상에서 제외되는지 확인 요청 드립니다.

처음 팀 등록 당시 팀장 깃헙 아이디만 등록한 상태인데

팀원 아이디를 추가등록 할 수 있나요?

메일로 받은 http://naver.me/FuJjPoku 해당 링크의 경우 아이디 적는 란이 하나밖에 없어서

그곳에 팀원 아이디를 적으면 기존 아이디가 등록 해제될까 싶어 먼저 여쭈어봅니다.

리소스 상황이 여유로워 추가 조정합니다. 2 -> 3

경량화 관련 문제들에서 Parameter 수는 어떤식으로 세시는 건가요?
keras를 예로들면 keras.backend.count_params()로 측정하시는 건가요?
각 프레임워크(keras, pytorch, tensorflow) 별로 어떤방식으로 모델의 Parameters를 세는지 알려주시면 감사하겠습니다.

NSML Docs 상에 local-nsml 이란 내용이 있던데,
혹시 테스트로 로컬 자원 이용해서 nsml 실행이 가능한지 여쭤보고 싶습니다.

또한 데이터셋(전체 또는 샘플)도 로컬에 저장이 가능 할까요?
NSML 페이지에서는 데이터셋의 목록만 표시되고 다운로드가 불가능한것 같은데,
데이터셋의 내용은 어떤식으로 확인할 수 있을까요?

19번문제 baseline 테스트를 해보려고 실행 한 결과 이런 에러 메세지가 나옵니다

Error: Invalid value: Dataset not found: nipa_mrc
FATA[2019/07/22 19:39:39.303] Internal server error

혹시 데이터셋을 어디서 따로 얻어야 하는건가요?

NSML 에서 데이터셋의 내용은 어떤식으로 확인할 수 있을까요? 그리고 NSML Leaderboard에서는 2_cls_crane1를 로컬에서는 파일이 확인 되지 않습니다.

Informations

CLI

• OS (Mac, Windows, Linux, etc) and version:
• client version(please show nsml --version):

WEB

• Brower (chrome, firfox, etc):
• URL:

What is your NSML login ID?

Question

20개 문제 각 아래 점수 배점표를 가집니다.

NSML로 submit을 하였는데,

Usage: nsml logs [OPTIONS] SESSIONError: Invalid value for "SESSION": Cannot logs [team_208/7_icls_face/3] (Only nsml rm is valid for submit sessions)

라는 error가 뜨고, 세션 정지가 되지 않습니다. 해결방법이 있을까요?