캐릭터셋 구분함수 utf8 bom euckr cp949 > PHP
PHP

캐릭터셋 구분함수 utf8 bom euckr cp949

조회 303회 댓글 0건
  • 현재 페이지 주소 복사
  • 페이스북으로 공유
  • X 로 공유
  • 트위터로 공유
  • 네이버 블로그로 공유
  • 네이버 카페 공유하기
  • 네이버 라인 공유하기
  • 네이버 밴드 공유하기
  • 링크드인으로 공유하기
  • 핀터레스트에 공유하기

엑셀은 cp949인 문서를 읽습니다. 윈도우가 cp949를 기본으로 하고 있기 때문에 그렇지요

cp949는 euc-kr과 호환이 됩니다. 리눅스에서 ansi는 euc-kr 인데 요즘 리눅스는 기본이 utf-8 이죠.

엑셀에서 csv를 잘 읽히게 하려면 euc-kr로 변경해줘야 합니다.


아래는 텍스트파일이 어떤 캐릭터셋으로 되어 있는지 확인 후 리턴해 주는 함수 입니다.

utf8과 utf8-bom이 좀 다르기 때문에 euc-kr로 변환했을때 ? 같은 것이 보인다면 일반 utf-8이 아니라고 보면 되긴 합니다.



    function detect_utf8_with_bom($filePath) {
        $handle = fopen($filePath, 'r');
        if (!$handle) {
            return false;
        }

        // 처음 3바이트 읽기
        $firstBytes = fread($handle, 3);
        fclose($handle);

        // BOM이 포함된 UTF-8
        if ($firstBytes === "\xEF\xBB\xBF") {
            return "UTF-8 BOM";
        } else {
            $content = file_get_contents($filePath);
            $encoding = mb_detect_encoding($content, ['UTF-8', 'EUC-KR', 'CP949'], true);
            return $encoding === 'UTF-8' ? "UTF-8" : $encoding; // 일반 UTF-8 또는 다른 인코딩
        }
    }

    // 사용 예제
    $file = 'ewy-2021.csv';
    $encodingType = detect_utf8_with_bom($file);
    echo "파일 인코딩: " . $encodingType;
    exit;
 



 


iconv 같은것으로 그냥 변환하면 문제가 발생하니 이그노 옵션을 주거나 utf-8 bom을 utf-8로 변경 처리하던가해서 처리 해야 합니다.

하여튼 euc-kr로 변환을 했는데 ? 같은 쓸모없는것이 방해를 해서 csv 파일이 제대로 처리 되지 않았으면 캐릭터셋 문제라고 보면 됩니다.


● CP949는 마이크로소프트 윈도우 한국어 문자인코딩

- CP949는 'Code Page 949'의 약자로, 마이크로소프트에서 한국어 Windows 운영 체제를 위해 개발했습니다.

- EUC-KR(Extended Unix Code for Korean)을 확장한 형태로, 기존 EUC-KR이 지원하지 않던 한글 8,822자를 추가로 표현할 수 있게 했습니다.

- CP949는 "확장완성형 한글"이라고도 불리며, KS X 1001과 KS X 1002 표준에 정의된 한글 문자들을 모두 포함합니다.

- 윈도우 95부터 한국어 윈도우의 기본 인코딩으로 사용되었습니다.

- 유니코드(UTF-8, UTF-16)와 달리 고정 길이 인코딩 방식으로, 한글 한 글자는 항상 2바이트로 표현됩니다.

- 웹 개발이나 다국어 지원 시스템에서는 호환성 문제로 인해 최근에는 유니코드(UTF-8)로 대체되는 추세입니다.

- CP949는 MS949, UHC(Unified Hangul Code)라고도 불립니다.


  • 현재 페이지 주소 복사
  • 페이스북으로 공유
  • X 로 공유
  • 트위터로 공유
  • 네이버 블로그로 공유
  • 네이버 카페 공유하기
  • 네이버 라인 공유하기
  • 네이버 밴드 공유하기
  • 링크드인으로 공유하기
  • 핀터레스트에 공유하기
전체 240건 1 페이지
  • 바이브코딩과 웹개발구조 어떤 방식이 좋은가?
    profile_image 요즘 API 방식으로 만드는것이 유행? 인듯 싶어 인원이 적은 규모에선 저건 아닌데 싶어 내 생각이 틀린것인가 확인차 인공두뇌와 상의를 좀 해봤는데 자신이 맞다고 생각하는쪽으로 진행을 하는것이 맞다고 봅니다.질문의 예를 하나 들자면 추상화 시키고 상속도 있는 상태에서 오류가 있는데 원인을 찾기 위해서 부모 찾아 헤메는 사람이 있던데 이게 맞는거냐?내가 봤을땐 안해도 되는것을 왜? 해서 시간을 버리는지. 복잡한것이 단순한것보다 문제가능성이 높은가 낮은가확장성의 경우 프로그램을 쓰는 이유가 확장성인데...URL 보면 가끔 이런 형태로 보이는 경우가 있지요. 왜? /V1/, /V2/ 이렇게 버전별로 만들어 졌을까요?…
  • 1KB는 1024Byte가 아니라 1000Byte 가 맞음.
    profile_image K(킬로)면 1000이 맞는데 뭔소리냐 하는 분들이 있으실텐데. 컴퓨터의 기본은 2진수를 사용하고 그렇기 때문에 모든 것들이 2의 승수로 갑니다.그래서 메모리도 4G짜리 사면 실제는 4096으로 나오고 어플리케이션 레벨에서도 이렇게 사용 되게 됩니다.시험볼때도 많이 나왔던 문제중 하나 인데. 이것이 바뀌어서 이제 1KB 하면 1024가 아니라는 겁니다.그럼 기존의 방식으로 하려면 1KiB 이렇게 표기를 해야 1024Byte가 됩니다.전 이게 잘못 된줄 알았어요.물어 보니 저장장치, 네트워크쪽에선 예전 부터 SI 방식을 사용했다고 합니다.혼동 되는것이 저장장치도 어플리케이션 레벨에선 2의 승수로 계산해서 사용하는…
  • 아마존리눅스3(AL3)에서 PHP 7.4 설치
    profile_image AL3에서는 패키지가 제공되지 아니하기 때문에 PHP 7.4 버전이 필요하다면 php-fpm을 소스를 받아 컴파일 하는 방법을 사용해야 됩니다.5시간은 걸린것 같은데 아래 사용하시면 시간을 대폭 줄일 수 있으니 필요하신분 참고하시면 되고 문제가 있었던 부분은 openssl 입니다. PHP 7.4에서 사용해야 되는 openSSL 버전과 현재 서버에 설치되어 있는 OpenSSL 버전이 차이가 있어서 컴파일 과정에서 오류가 발생 하는데 이 문제인지 확인 하는 방법은 끝에 적어 놓은것 처럼 openssl만 빼고 컴파일해보세요. 잘 된다면 정확히 openssl 버전의 문제 입니다. ## 소스 컴파일에 필요한 패…
  • Windows에서 winget으로 PHP 최신버전 설치하는 방법 (php.ini 설정 포함)
    profile_image PHP 설치 되어 있지 아니하여 윈도우PC에 최신버전으로 설치버전은 설치 할 때마다 다르기 때문에 본인이 사용하려는버전을 선택 하면 됩니다.     > 현대적인? 방법으로 설치함.       예전에 압축해 놓은것 풀고 path 설정하고 했던 그런 방법을 쓰지 않고 간단하게 설치가 되었다.      winget install PHP.PHP.8.5    > 아래 명령으로 설치된 위치를 찾음      where php    > php.ini-production…
  • PHP에서 솔리드캐쉬 개념 사용하기
    profile_image OP캐쉬 사용하면 괜찮아 보다는 저 같은 경우는 사용하지 않아도 괜찮아를 더 좋아 합니다.▷ 솔리드 캐시(SOLID CACHE)란?솔리드 캐시는 간단히 말해 "비싼 RAM(REDIS) 대신 저렴하고 넉넉한 디스크(DB)에 캐시를 저장하는 전략"으로 원래 루비 온 레일즈(RUBY ON RAILS) 커뮤니티에서 제안된 방식이지만 본질은 어떤 언어에서든 적용 가능한 실용적인 캐싱 철학임.▷ 핵심 철학: "ssd는 생각보다 훨씬 빠르다"과거에는 디스크가 너무 느려서 무조건 데이터를 ram(REDIS MEMCACHED)에 올려야 했지만 지금은 nvme ssd 같은 초고속 저장 장치가 보편화되었습니다. 굳이 복잡하게 별도의 메모리…
  • MySQL SELECT 성능은 왜 InnoDB가 MyISAM보다 빠를까? – 구조적 이유
    profile_image MyISAM은 SELECT가 빠르고 InnoDB는 느리다그런 경우도 있고 아닌 경우도 있기 때문에 어떤 용도로 사용하느냐에 따라서 다를 수 있습니다.그리고 처음 데이터 넣은 다음 select만 90% 이상이고 테이블 사용이 업데이트나 인서트는 적은 경우인지 불특정 다수에게 서비스 하기 때문에 불특정한 row를 가져와서 보여줘야 하는것인지에 다를 수 있는 것입니다. 가장 큰 차이: 데이터와 인덱스 구조→ MyISAM  - 데이터 파일(.MYD) 과 인덱스 파일(.MYI) 이 분리됨  - 인덱스 → 데이터 파일을 다시 읽는 구조  - 동작흐름: PK 인덱스 탐색 (.MYI) -> 데이터 위치…
  • MySQL INSERT ... ON DUPLICATE KEY UPDATE – 중복 데이터 처리의 장점과 단점
    profile_image 데이터베이스를 사용하다 보면 이미 존재하는 데이터인지 확인한 후 INSERT 또는 UPDATE를 해야 하는 상황을 자주 만나게 됩니다.이때 매우 유용한 문법이 바로 INSERT ... ON DUPLICATE KEY UPDATE입니다.즉, 쿼리 한번으로 해결 된다는 의미 인데 아무곳에서나 사용 가능한것은 아니고 키 중복이 발생하는 부분에서만 사용 하는 것입니다.그렇기 때문에 unique의 특성을 모르시는 분은 사용 하면 안되겠지요.  장점- 쿼리 수 감소: SELECT → INSERT/UPDATE 두 번 쿼리 날릴 필요 없음- 동시성 문제 감소: SELECT 후 INSERT 방식보다 Race Condition 발…

상업적 이용 금지. 컨텐츠는 개인 용도로만 사용이 가능 합니다.