윈도우에서 라즈베리파이 커널 빌드

WSL이나 qemu등을 사용하지 않고 MSYS2에서 라즈베리파이 커널 빌드와 busybox를 initd로 사용하여 부팅가능한 SD카드 만드는 과정을 기록한다. MSYS2에서 만들면 발생하는 문제점으로는 라즈베리파이가 부팅 된 이후 특별히 할 수 있는것이 없다.

WSL을 사용하거나 qemu에서 HAXM 가속으로 리눅스를 부팅해서 작업하는것이 시간도 몇배나 절약되고 자잘한 문제가 덜 발생한다. 예로 윈도우에서 빌드한 툴체인에서 libc를 static 라이브러리로 링크하면 _Unwind_Resume등을 찾을 수 없어서 링크가 불가능하여 라즈베리파이에서 구동되는 컴파일러를 빌드할 수 없는 등 할 수 없는 작업들이 많다. (LDPlayer같은 프로그램을 사용한다면 하이퍼바이저를 사실상 사용할 수 없기때문에 WSL을 사용할 수 없다.)

만약 부팅가능한 SD 카드를 만들고 젠투 리눅스같은 배포본을 설치 할 예정이라면 MSYS2에서도 시도할만하다.

Continue reading 윈도우에서 라즈베리파이 커널 빌드

Qt 6.6.1 MSVC 2022로 빌드

MSVC 2022로 Qt 6.6.1버전 빌드 시 발생하는 오류 리스트

  1. 소스코드 파일 인코딩 오류 (비 유니코드 언어가 영어 (미국)이 아닌경우)
  2. qtwebengine/src/3rdparty/gn/src/gn/variables.cc 텍스트 오류 (1번 항목과 동일한 환경, 577번 라인의 0xA0(NBSP) 캐릭터에서 에러 발생하며 0x20(SPACE)으로 변경하면 해결)
  3. qtwebengine/src/3rdparty/chromium/third_party/webrtc/rtc_base/checks.h LogStreamer의 연산자 오류
  4. gperf 버전이 3.1이상일 경우 오류 발생 ((standard input):1915: warning: junk after %% is ignored 메시지 발생하며 파일이 정상처리 안됨)

크게 네가지 오류가 나타난다. 이 중 1, 2번은 이 글에서 “지역설정” 항목을 참조하여 변경하면 해결 된다. 3번 항목은 vcpkg 프로젝트에서 qtwebengine 패키지의 패치(clang-cl.patch, msvc-template.patch)를 그대로 적용하면 해결된다. 4번은 Qt 5.15.x 버전을 다운받은 후 gnuwin32\bin 경로를 PATH의 맨 앞으로 추가하여 clean & build 하면 해결된다.

만약 시스템 로케일 변경이 귀찮거나 재부팅을 하기에 곤란하다면 아래 소스코드를 빌드 후 실행하여 UTF-8 BOM을 추가하고 환경변수에 “PYTHONUTF8=1″을 추가(프롬프트에서 SET PYTHONUTF8=1 실행)하여 파이선의 파일 인코딩을 UTF-8로 인식하도록 설정한다.

아래 코드는 NBSP문자를 SPACE로 변환 및 확장 아스키 영역의 문자가 있을 경우 UTF-8 BOM을 추가한다.

/*
 * 파일명: CSourceSetUtf8Bom.cpp
 * 빌드명령: cl CSourceSetUtf8Bom.cpp /O2 /std:c++20 /EHsc
 * 실행: CSourceSetUtf8Bom <qt source path>
 * 실행 예: CSourceSetUtf8Bom D:\OpenSource\Qt6.6.1.src
 */

#include <algorithm>
#include <filesystem>
#include <fstream>
#include <iostream>
#include <string>

static void fetch(const std::filesystem::path& source_path, std::size_t& count)
{
    std::cout << count << "\r";
    std::filesystem::directory_iterator it(source_path);

    for (; it != std::filesystem::end(it); it++)
    {
        if (std::filesystem::is_directory(*it))
        {
            fetch(*it, count);
        }
        else
        {
            std::string path = it->path().string();

            if (!path.ends_with(".c") && !path.ends_with(".cc") && !path.ends_with(".cpp") && !path.ends_with(".h"))
            //if (!path.ends_with(".py"))
            {
                continue;
            }

            count++;

            std::basic_ifstream<unsigned char> istream(path);
            std::basic_string<unsigned char> content((std::istreambuf_iterator<unsigned char>(istream)), std::istreambuf_iterator<unsigned char>());

            istream.close();

            if (content.size() >= 3 && content[0] == 0xEF && content[1] == 0xBB && content[2] == 0xBF)
            {
                continue;
            }

            bool extended = std::find_if(content.begin(), content.end(), [](unsigned char c) { return c > 127; }) != content.end();
            if (!extended)
            {
                continue;
            }

            std::cout << count << ", " << it->path().string() << ", " << content.size() << " bytes\n";

            // replace NBSP -> SPACE
            std::replace(content.begin(), content.end(), 0xA0, 0x20);
            std::basic_ofstream<unsigned char> ofstream(path);

            ofstream << static_cast<unsigned char>(0xEF);
            ofstream << static_cast<unsigned char>(0xBB);
            ofstream << static_cast<unsigned char>(0xBF);
            ofstream << content;

            ofstream.close();
        }
    }
}

int main(int argc, char* argv[])
{
    if (argc < 2)
    {
        std::cout << argv[0] << " <FOLDER>\n";

        return EXIT_FAILURE;
    }

    std::size_t count = 0;
    std::filesystem::path source_root(argv[1]);

    if (!std::filesystem::is_directory(source_root))
    {
        return EXIT_FAILURE;
    }
    fetch(source_root, count);

    return EXIT_SUCCESS;
}

윈도우 11 22H2의 작업 관리자 성능 모니터링 문제

CPU의 스레드별 사용률을 프로그래밍으로 얻기위해 NtQuerySystemInformation 함수로 얻어진 카운터로 사용률 계산해보니 작업 관리자의 성능 모니터 값과 두배 이상 차이나는 현상이 발생하였다.

작업관리자의 프로세스와 성능 화면은 아래와같다.

ConsoleApp1의 사용률 약 42%
성능 모니터의 프로세서 사용률 약 43%
Continue reading 윈도우 11 22H2의 작업 관리자 성능 모니터링 문제

Qt ODBC 오류발생 및 조치사항

며칠 전 응용 프로그램에서 데이터가 표시되지 않는다는 연락을 받았다. 오류 메시지를 확인해보면 주로 아래와같은 메시지가 출력된다.

[Microsoft][ODBC SQL Server Driver]TDS 스트림에 프로토콜 오류가 있습니다.

여러 윈도에서 확인해본 결과 해당 문제가 발생되는 윈도의 ODBC 드라이버 중 SQL Server의 날짜가 윈도 11은 2022-11-09 였으며 윈도 10은 2022-11-12 쯤 날짜였다. 업데이트 된 날짜는 해당 날짜와 동떨어져있는데 저 드라이버의 날짜가 왜 저런지는 알 수 없었다. (확인된 윈도가 5개 정도밖에 안되어 해당 드라이버 날짜와 밀접한 관계인지 명확하지는 않다. 단지 문제가 발생된 윈도에서 확인하면 공통적으로 2022년 11월로 되어있었다.)

QSqlQuery가 중첩되어 사용되어있는 코드여서 결국 문제가 발생한건가보구나 싶었는데 중첩된 코드를 풀었음에도 동일한 문제가 발생하여 새로운 Qt 프로젝트를 생성하여 쿼리를 실행해보았더니 동일한 문제가 발생하였다. 덕분에 하루종일 작업한 코드는 그저 삽질이였다.

결국 며칠 전 날짜로 변경 된 드라이버의 문제일것이라 생각되어 아래와같이 드라이버를 SQL Server Native Client 11.0으로 수정하여 실행하니 문제가 발생하지 않았다.

해당 드라이버는 클라이언트 PC에 설치된 드라이버가 아니므로 MS 공식 홈페이지에서 배포되는 ODBC Driver 17 for SQL Server를 설치하여 연결 문자열을 변경 후 프로그램을 빌드하여 업데이트 후 해결되었다.

아래는 드라이버 다운로드 링크.
https://learn.microsoft.com/ko-kr/sql/connect/odbc/download-odbc-driver-for-sql-server

아래와같은 애러가 발생하면 17버전을 사용하면 편하게 해결가능하다.

[Microsoft][ODBC Driver 18 for SQL Server]SSL 공급자: 신뢰되지 않은 기관에서 인증서 체인을 발급했습니다.\r\n [Microsoft][ODBC Driver 18 for SQL Server]클라이언트가 연결하지 못했습니다. QODBC: Unable to connect
참고링크: https://learn.microsoft.com/en-us/troubleshoot/sql/connect/certificate-chain-not-trusted

MS는 도대체 뭘 건들었길레 윈도에 기본 설치되는 ODBC 드라이버인 SQL Server가 갑자기 문제가 발생하게 된걸까. ODBC 드라이버 배포 페이지에 해당 안내도 없고 뜬금없이 업데이트에 문제가 발생하고 도저히 이해가 안된다. 덕분에 하루 반나절을 삽질했다. 이런 경우가 한두번이 아닌거같은데 기분탓인가?