ukairia777 / tensorflow-nlp-tutorial Goto Github PK

https://github.com/ukairia777/tensorflow-nlp-tutorial/blob/main/02.%20Text%20Preprocessing/2-10.%20text_preprocessing_tools_for_korean_text.py

내 파일 내용이 주제와 다른 거 같습니다.
또한, colab 경로도 다른 거 같습니다.

model.fit 부분에 코드 에러 해결책 업데이트 부탁드립니다

• AttributeError: 'NoneType' object has no attribute 'dtype

해결 방법

model = TFBertForSequenceClassification.from_pretrained("klue/bert-base", num_labels=2, from_pt=True)
loss =tf.keras.losses.SparseCategoricalCrossentropy(from_logits=True)
metric = tf.keras.metrics.SparseCategoricalAccuracy('accuracy')
model.compile(optimizer=optimizer, loss=loss, metrics=[metric])

• loss 관련한 부분을 재정의 [logit 함수 관련 정의가 빠진것으로 보입니다]

glove 모듀을 사용하기 위해 라이브러리 설치 및 임포트 하려고 했는데,

pip install glove_python_binary 이 코드로 해도 실패하고,

pip install glove_python 만 입력해도 실패합니다.

혹시 해당 라이브러리를 설치하고 임포트 할 수 있는 방법이 있을까요?

안녕하세요!
작가님 덕분에 너무 유용하게 자료들 참고하며 학수하고 있습니다.
질문이 하나 있는데요.

18-3. kor_bert_nsmc_tpu
class TFBertForSequenceClassification(tf.keras.Model) 로 정의하여 학습시킨

model = TFBertForSequenceClassification("klue/bert-base")
model.fit(train_X, train_y, epochs=2, batch_size=64, validation_split=0.2)
results = model.evaluate(test_X, test_y, batch_size=1024)
의 'model'을 colab에서 google drive 내에 저장하는 방법을 여쭤봐도 될까요?

감사합니다! :)

안녕하십니까, 좋은 자료 공유 감사드립니다.

본 repo에 환경정보가 따로 정리되어 있지 않고, e-book에도 일부 패키지 정보만 공개되어 있는 것으로 보입니다
혹시 전체 코드 실행이 되는 환경의 requirements 및 yaml 정보도 commit해주실 수 있을까 싶어 issue 남깁니다

감사합니다