친구추가 하시면 매일 ‘오늘의 글’을 받아보실수 있습니다.
[협동조합 소요] 조합에 가입하기
조합원이 되시면 더 많은 자료와 정보
교육을 함께 하실 수 있습니다.
소요 사이트는 어떤 곳일까요?
다양하고 유익한 소요의 콘텐츠와
활용법을 알려드립니다.
오늘의 글
기업들은 왜 갑자기 ‘AI 지출’을 걱정하기 시작했나
먼저, '토큰'이 대체 뭘까 기사를 이해하려면 먼저 '토큰(token)'이라는 개념부터 짚고 넘어가야 합니다. AI 언어모델은 사람처럼 문장을 통째로 읽거나 쓰는 게 아니라, 텍스트를 작은 조각으로 잘라서 처리합니다. 이 조각 하나하나를 토큰이라고 부릅니다. 영어의 경우 대략 단어 하나가 토큰 한두 개에 해당하고, 한국어는 조사나 어미 때문에 조금 더 잘게 쪼개지는 경향이 있습니다. 예를 들어 볼까요. 사용자가 AI에게 "이 계약서 요약해줘"라는 짧은 질문과 함께 A4 열 장짜리 계약서 파일을 첨부했다고 합시다. 질문 자체("이 계약서 요약해줘")는 토큰 몇 개에 불과합니다. 하지만 첨부된 계약서 열 장은 통째로 AI에게 '입력'되므로, 대략 수천 토큰에 달할 수 있습니다. AI가 내놓는 요약본이 A4 한 장 분량이라면, 이 [...]
모아보기
