챗봇 문답 페어

챗봇 문답 페어는 songys@github 님이 만드신 챗봇 문답 데이터입니다. 데이터 정보는 다음과 같습니다.

• author: songys@github
• repository: https://github.com/songys/Chatbot_data
• size:
  • train: 11,876 examples

데이터 구조는 다음과 같습니다.

1. 파이썬에서 사용하기

파이썬 콘솔을 실행한 뒤 말뭉치를 내려받고 읽어들일 수 있습니다.

말뭉치 다운로드

챗봇 문답 페어를 로컬에 내려 받는 파이썬 예제는 다음과 같습니다.

from Korpora import Korpora
Korpora.fetch("korean_chatbot_data")

말뭉치 읽어들이기

챗봇 문답 페어를 파이썬 콘솔에서 읽어들이는 예제는 다음과 같습니다. 말뭉치가 로컬에 없다면 다운로드도 함께 수행합니다.

from Korpora import Korpora
corpus = Korpora.load("korean_chatbot_data")

다음과 같이 실행해도 챗봇 문답 페어를 읽어들일 수 있습니다. 수행 결과는 위의 코드와 동일합니다.

from Korpora import KoreanChatbotKorpus
corpus = KoreanChatbotKorpus()

위 코드 둘 중 하나를 택해 실행하면 corpus라는 변수에 말뭉치를 로드합니다. train은 챗봇 문답 페어의 train 데이터로 첫번째 인스턴스는 다음과 같이 확인할 수 있습니다.

>>> corpus.train[0]
LabeledSentencePair(text='12시 땡!', pair='하루가 또 가네요.', label=0)
>>> corpus.train[0].text
12시 땡!
>>> corpus.train[0].pair
하루가 또 가네요.
>>> corpus.train[0].label
0

get_all_texts라는 메소드를 실행하면 챗봇 문답 페어의 모든 text(질문)를 확인할 수 있습니다.

>>> corpus.get_all_texts()
['12시 땡!', '1지망 학교 떨어졌어', ... ]

get_all_pairs라는 메소드를 실행하면 챗봇 문답 페어의 모든 pair(답변)를 확인할 수 있습니다.

>>> corpus.get_all_pairs()
['하루가 또 가네요.', '위로해 드립니다.', ... ]

get_all_labels라는 메소드를 실행하면 챗봇 문답 페어의 모든 label(레이블)을 확인할 수 있습니다.

>>> corpus.get_all_labels()
[0, 0, ... ]

2. 터미널에서 사용하기

파이썬 콘솔 실행 없이 바로 말뭉치를 다운받을 수 있습니다. 다음과 같이 실행하면 됩니다.

korpora fetch --corpus korean_chatbot_data