첫 맥북 추천 모델
처음 맥북을 사는 사람을 위한 추천 모델을 알아보자.맥북은 성능, 디자인, 안정성 등 여러 면에서 훌륭하지만, 처음 사용자에게는 어떤 모델을 선택해야 할지 고민이 될 수 있다. 간단히 개념부터 잡고 가자면, 문서작성이나 이미지 작업, 블로그, 간단한 영상편집 등 라이트하게 사용할 계획이라면, 맥북 에어를 선택하는 게 좋을 것이다.그 다음은 자신이 감당할 수 있는 무게에 따라 13인치, 14인치, 15인치, 16인치... 선택을 하면 된다. 맥북 에어는 가볍게 사용하는 게 목적이므로 13인치대가 컨셉이 맞고 가장 많이 팔리기도 한다. 해상도가 (2560x1600) 높아서 화면이 좁아서 뭘 못하는 일은 없다.CPU의 최신성에 따라 M1, M2, M3로 나뉘는데 같은 맥북 에어지만 약간의 성능 개선이 있으므로..
2024. 5. 30.
ChatGPT 토큰 수 세기
현대의 대규모 언어 모델, 특히 OpenAI의 GPT-3.5와 GPT-4와 같은 모델들은 텍스트를 토큰이라는 문자의 시퀀스로 처리한다.이러한 토큰화(Tokenization)는 텍스트를 분석하고 생성하는 데 중요한 역할을 한다.이 글에서는 토큰화의 개념, 모델별 토큰화의 차이점, 그리고 토큰 규칙에 대해 살펴본다. 토큰화(Tokenization)란 무엇인가?토큰화는 텍스트를 작은 단위인 토큰으로 분리하는 과정이다.토큰은 일반적으로 단어, 부분 단어, 혹은 심볼 등의 문자 시퀀스다.예를 들어, "ChatGPT는 훌륭해"라는 문장을 토큰화하면 ["Chat", "GPT", "는", "훌륭", "해"]와 같은 토큰 시퀀스로 변환될 수 있다. OpenAI의 언어 모델들은 이러한 토큰 간의 통계적 관계를 이해하여 시..
2024. 5. 30.