Tag: Empirical

All the articles with the tag "Empirical".

• 확신을 실측 앞에 세워봤다 1편 — 반례는 어휘만 가르쳤다

  26 Aug, 2026

  Obsidian 플러그인 `/refactor`로 병합된 노트를 다시 돌렸더니, 방금 자기가 합친 걸 다시 쪼개라는 제안이 나왔다. 원인을 찾아보니 프롬프트 반례(few-shot example)가 특정 어휘만 막고 있었다.

• 벤치마크 표를 못 믿어서, 같은 원고 63개로 두 모델을 직접 붙여봤다

  23 Aug, 2026

  모델을 한 단계 올렸는데도 같은 종류의 버그가 계속 나왔다. 이번엔 같은 회사 안에서 모델을 또 바꾸는 대신, 아예 다른 회사 모델과 정면으로 비교해보기로 했다. 그리고 그 결과를 실제 서비스에 반영한 뒤, 예전에 문서로 남겨둔 버그들이 정말 없어졌는지 하나하나 다시 확인해봤다.

• 링크가 깨질 줄 알고 새 필드까지 설계했는데, 이미 다 되어 있었다

  22 Aug, 2026

  글 103개가 전부 programming 폴더 하나에 몰려 있고 태그도 100%씩 붙어서 무의미해진 걸 고치려고 카테고리를 나누기로 했다. 그런데 폴더를 나누면 글 사이 링크 9개가 깨질 거라고 확신하고 새 메커니즘부터 설계하다가, 코드를 실제로 열어보고서야 이미 해결돼 있다는 걸 알았다.

• 설계까지 다 거치고도, 실행해봐야 보였다 4편 — 없는 줄도 몰랐던 안전망을 찾아냈다

  21 Aug, 2026

  웨이브 병렬화를 배포한 뒤, 그 유명한 다니엘라 아모데이 예시가 여전히 쪼개지지 않았다. 원인을 찾다가 내 첫 실측 자체가 틀렸다는 걸 발견했고, 있는 줄 알았던 기능이 사실 없었다는 것도 알게 됐다.

• 설계까지 다 거치고도, 실행해봐야 보였다 2편 — 병합을 빼자, 분할이 살아났다

  19 Aug, 2026

  요약만 하고 분할은 거의 안 되는 것 같다는 관찰에서 시작했다. 배치 크기를 의심했는데, 더 깊이 파보니 진짜 원인은 따로 있었다 — ingest가 한 번에 너무 많은 판단을 하고 있었다. 그리고 그 발견이 속도·비용 설계까지 이어졌다.