본문 바로가기

전체 글43

[260712] 어제 "뒤집었다"던 결과, 오늘 다시 파보니 더 복잡했다 속도는 진짜 빨라졌는데 일관성이 흔들린다는 걸 알게 됐고, 그 와중에 전원 케이블 사고로 재부팅까지 겪었다아직 오늘 하루가 다 안 끝났지만, 지금까지 진행된 내용을 정리해봅니다. 어제 얘기의 후속편 성격이 강한 하루였습니다.어제 "뒤집었다"던 결과, 다시 파보니 더 복잡했다어제 예전에 접어뒀던 병렬 처리 방식을 다시 꺼내서 속도가 꽤 빨라졌다고 적었는데, 오늘 더 깊이 파보니 이야기가 좀 더 복잡했습니다. 속도가 빨라진 건 맞습니다(다시 재봐도 확인됨). 그런데 같은 입력, 같은 설정으로 반복 실행했을 때 결과가 매번 조금씩 달라진다는 걸 발견했습니다.처음엔 "동시에 여러 요청을 처리하다 보니 서로 간섭이 생기나?"라고 의심했습니다. 그런데 대조군을 만들어서 확인해보니, 동시 처리를 아예 안 하고 요청 .. 2026. 7. 12.
소멸하는 데이터들 — 사이드 프로젝트가 하나에서 셋으로 늘었다 뉴스 하나 모아두려고 만든 프로젝트가, 같은 원칙으로 게시판 심리·분 단위 가격까지 모으는 우산 프로젝트가 됐습니다퀀트봇 본체 프로젝트에서 작은 프로젝트를 하나 분리했던 게 얼마 전인데, 지금은 그 프로젝트가 셋으로 늘었습니다. 시작은 과거 종목 뉴스를 모아두는 것부터였습니다.왜 따로 만들었나새 프로젝트를 만들지 말지 정하는 기준을 하나 세웠습니다. "소멸성(perishability)" — 지금 안 잡아두면 영영 못 잡는 데이터인가, 아니면 나중에 언제든 다시 만들어낼 수 있는 데이터인가.일봉 가격·거시 데이터는 비소멸입니다. 공식 소스에서 몇 년 전 특정 날짜의 데이터를 언제든 다시 조회할 수 있습니다. 굳이 따로 아카이브해둘 이유가 없습니다.종목 뉴스는 다릅니다. 포털 뉴스 페이지는 일정 기간이 지나.. 2026. 7. 12.
[260711] 그래픽카드 확장, 일단 새 카드부터 갈아 끼워 테스트했다 두 장을 같이 꽂기 전에 새 카드 안정성부터 확인했고, 예전에 "효과 없다"고 접었던 방법도 다시 꺼내 뒤집었다며칠 전 방향만 정해뒀던 하드웨어 확장을 오늘 진행했고, 예전에 포기했던 아이디어 하나도 다시 꺼내서 뒤집었습니다.그래픽카드 확장, 우선 새 카드부터 갈아 끼워 테스트지금 쓰던 것과 같은 모델의 그래픽카드를 하나 더 구했습니다. 최종 목표는 두 장을 동시에 꽂아서 쓰는 거지만, 오늘은 우선 새 카드로 갈아 끼운 뒤 단독으로 안정성부터 확인했습니다. 전력을 조금 제한한 상태로 부하 테스트를 돌려봤는데, 온도는 기존보다 오히려 낮게 유지됐고, 팬 소음도 줄었고, 속도 저하나 오류도 전혀 없었습니다.두 장을 실제로 같이 꽂는 건 아직인데, 미리 케이스 내부 구조를 확인해보니 두 장이 나란히 들어갈 자.. 2026. 7. 12.
[260710] '조용히' 잘못되고 있던 것들을 하루에 세 개 잡았다 생성이 끝없이 폭주하던 문제부터, 아침에 고친 게 저녁에 조용히 속도를 반토막 낸 것까지주말을 끼고 지난 며칠 사이 발견된 것들을 정리하고 마무리한 하루였습니다. 공통점이 하나 있었는데, 셋 다 "겉으로는 티가 안 나게 조용히" 잘못되고 있었다는 겁니다.사고 1: 답변 하나가 끝없이 길어져서 프로덕션이 멈췄다야간 분석 작업 중 하나가 이상하게 정체돼 있는 걸 발견했습니다. 원인을 보니, 로컬 LLM을 돌리는 서버 쪽에 "답변은 최대 이 정도 길이까지만" 하는 상한선이 빠져 있었습니다. 보통은 답변 하나가 짧게 끝나는데, 어쩌다 한 번 모델이 같은 말을 반복하며 멈추지 않고 계속 답변을 만들어내면 수만 토큰, 수십 분까지 폭주할 수 있었던 겁니다. 그동안 감시 체계가 이런 경우를 못 잡고 있었던 게 더 큰.. 2026. 7. 11.
미국은 신고가, 한국은 반토막 — 전력기기주의 엇갈린 여름 같은 AI 전력 슈퍼사이클인데 한·미 전력기기주가 왜 이렇게 벌어졌나, 그리고 투자자가 확인해야 할 것AI 데이터센터가 폭발적으로 늘면서 "전기를 어디서 끌어오느냐"가 올해 시장의 핵심 화두가 됐다. GPU만큼이나 변압기·개폐기·전력망 설비가 병목이라는 인식이 퍼졌고, 관련 기업들이 상반기 내내 시장을 이끌었다. 그런데 지금 한국과 미국 전력기기주는 정반대 그림을 그리고 있다.한국 전력기기 대장주 4종목의 현재 위치국내 전력 밸류체인의 대표 종목을 놓고 보면, 올해 최고가 대비 현재가가 일제히 절반 수준이다.종목현재가올해 최고가최고 대비HD현대일렉트릭815,0001,430,00057%LS ELECTRIC189,400335,00057%효성중공업2,770,0004,742,00058%두산에너빌리티73,2001.. 2026. 7. 10.
[260709] 몇 일째 미스터리였던 새벽 크래시의 진짜 범인을 찾았다 메모리 문제의 진짜 원인을 찾아 고치는 김에, 프로덕션을 실수로 죽여버리기도 한 하루오늘은 몇 주간 미궁이었던 문제 하나를 드디어 근본 원인까지 찾아 고쳤습니다. 다만 그 과정에서 실수도 두 건 겪었습니다.몇 일째 미스터리였던 새벽 크래시, 진짜 범인을 찾았다얼마 전부터 매일 새벽 특정 시각마다 개발 환경이 죽는 문제가 있었습니다(그래서 핵심 프로세스들을 개발 환경과 분리된 별도 서비스로 옮겨두기도 했었는데, 이건 증상 완화였지 원인 해결은 아니었습니다). 오늘 다른 AI와 함께 로그를 더 깊이 파본 끝에 드디어 진짜 원인을 찾았습니다.무거운 데이터 계산을 하는 라이브러리가 다 쓴 메모리를 파이썬 코드 상으로는 분명히 반납했는데, 운영체제 입장에서는 그 메모리가 실제로 회수가 안 되고 있었습니다(메모리 .. 2026. 7. 9.

티스토리툴바