본문 바로가기

쓰기

저번에 (5) 문제.. 기억하시나요?

아마도 이것 때문인 것 같습니다.

void CCustomDic2::PreCustomDic(LPSTR Dest, LPCSTR Source)
{
    // ... 전략 
    for(int head=0;head<SourceLen;head++)
    {
          for(int tail=SourceLen-1;tail>head;tail--)
         {
              // ... 중략 ...

             //2바이트 처리, 수행속도 향상용
             if((BYTE)Source[tail]>0x80){
                   tail--;
             }
         }
         //2바이트 처리, 수행속도 향상용
         if((BYTE)Source[head]>0x80){
              //전각문자라면
              head++;
         }
    }
    Temp+=string(Source,SPoint,SourceLen-SPoint); //마무리
}

저기 빨간 부분..
MBCS 에서는 절대 뒤에서 앞으로 탐색하시면 안됩니다. 특히, 일본어인 경우 더 그렇습니다.

일본어 (Shift-JIS) 의 경우, 리드바이트는 81-9F, E0-EE 까지, 트레일바이트는 40-FB 까지인가 그렇습니다.
그런데 이게 거꾸로 탐색하면 트레일 바이트부터 탐색하기 때문에 어디서 어디까지가 글자 1자인지 모르게 됩니다.

예를 들어볼까요.
82 DD  82 60  2E 라는 코드로 만들어진 문자열이 있다고 합시다.

이걸 앞부터 읽으면 다음과 같이 읽힙니다.
[82DD] [8260] [2E]

이걸 뒤부터 읽으면 다음과 같이 읽힙니다.
[??82] [DD82] [60] [2E]

결국.. 글자가 완전히 깨져버리게 됩니다.

만약 8260  이라는 글자를 찾으려 해도.. 당연히 못찾게 되겠지요.

꼭 뒤에서 앞으로 처리를 하고 싶으시다면.. 먼저 MBCS 코드를 글자별로 나눠놓아야 할 필요가 있습니다.
그러니까..
82 DD  82 60  2E 라는 1바이트 코드를 -> [82DD] [8260] [002E] 라는 2바이트 코드로 일단 나눠놓고 ->
뒤에서부터 [8260]이라는 글자를 찾아야 제대로 찾아집니다.

그리고.. ((BYTE)Source[head]>0x80) 이라는 방법을 너무 신뢰하지는 마세요.
Shift-JIS 코드의 리드바이트는  81-9F, E0-EE 라고 했죠? A0-DF 까지는 1바이트 코드 (반각 가타카나) 입니다.
만약 전국란스 같은데에서 반각 카나가 *홀수* 개 쓰이고 다시 전각으로 들어가는 경우.. 앞에서 읽는다 하더라도 저 방법은 역시 글자가 밀려들어가게 됩니다.

분류 :
Talk
조회 수 :
7811
등록일 :
2008.08.12
21:20:32
엮인글 :
https://arallab.hided.net/3656/136/trackback
게시글 주소 :
https://arallab.hided.net/board_devtalk/3656

Hide_D

2008.08.12
22:41:51
꺄악[.....]
List of Articles
번호 제목 글쓴이 날짜sort 조회 수
공지 Talk [필독] 테스트필터 사용시 주의사항 라파에 2008-08-03 155439
43 Talk 필터 3개 커밋 완료했습니다. [2] Hide_D 2008-08-11 9263
42 Talk CustomSD 원문 단어 흘리기 결과. [2] whoami 2008-08-10 9910
41 Talk whoami님 Util.h의 옵션 파서가 [4] Hide_D 2008-08-10 7908
40 Talk 다음 계획 [1] Hide_D 2008-08-10 9995
39 Talk 맵을 이렇게 사용해도 되나요? [2] Hide_D 2008-08-09 8705
38 Talk 플러그인을 다시 Multi2용으로 만들면서 생긴 궁금증 [4] Hide_D 2008-08-09 8374
37 Talk 함수, 변수 작명법 잘 정리된곳 없나요; [1] Hide_D 2008-08-03 9291
36 Talk 현재까지 작업물 + 에러 OTL [2] file Hide_D 2008-08-03 9891
35 Talk VS 2005로 갈아탔습니다 [1] Hide_D 2008-08-03 8272
34 Talk 0.3에서 추가할것 Hide_D 2008-08-03 7908
33 Talk DumpText는 아직 개선이 좀 필요한듯; [3] Hide_D 2008-08-03 8111
32 Talk 문자열 -> Hex 변환이 제대로 안되네요. [7] Hide_D 2008-08-02 7561
31 Talk 퓩퓩... 퓩퓩... oTL whoami 2008-08-02 7557
30 Talk DumpText를 만들고 있는데... [2] Hide_D 2008-08-02 7892
29 Talk 리얼라이브 세이브에 대해서... [4] 나는누구인감? 2008-08-01 7894
28 Talk 전에 쓸모 있는 기능의 2번 관련 Hide_D 2008-07-31 8860
27 Talk 쓸모가 있을것 같은 기능들 [4] Hide_D 2008-07-30 18225
26 Talk 사용자 사전 플러그인에 대해서 설문 [5] Hide_D 2008-07-30 8785
25 Talk RLCmd, KoFilter 의 디버그 로그 기능에 대해 - 2 whoami 2008-07-28 10308