내 가장 영리한 아이디어들의 무덤
초기에 나는 내가 직접 고안한 트레이딩 전략들로 가득 찬 폴더를 가지고 있었다 — 열두 개쯤, 어쩌면 그 이상. 각각은 시장이 어떻게 작동하는지에 대한 작은 이론이었고, 정성껏 코드로 옮겨졌으며, 정성껏 점수가 매겨졌다. 나는 그 폴더가 자랑스러웠다.
오늘날 그 안의 모든 전략은 죽었다. 나는 그 컬렉션 전체를 묻어버렸고, 그것을 묻은 일은 결국 이 프로젝트 전체에서 내가 한 가장 유용한 일 중 하나로 드러났다.
이론들의 동물원
그 작업은 내가 하는 동안에는 더없이 훌륭하게 느껴졌다. 나는 시장에 대한 직관 — 어떤 상황에서 가격이 어떤 식으로 행동하는 경향이 있다는 감각 — 을 가져다가 그것을 명시적인 전략으로 인코딩하곤 했다. 추세가 있어 보일 때를 위한 것 하나. 조용하고 횡보하는 구간을 위한 것 하나. 급격한 반전을 위한 것 하나. 그런 다음 나는 그것들을 데이터에 대해 돌려보고 점수를 매겼으며, 일종의 리더보드를 유지하면서 내 아이디어 중 어떤 것이 지금 이기고 있는지를 지켜보았다.
그것은 나름의 방식으로 깊이 만족스러웠다. 각 전략은 실행 가능하게 만들어진 내 자신의 사고의 한 조각이었다 — 이제 내가 검증할 수 있게 된, 세계에 대한 하나의 믿음. 그리고 각각의 옆에는 늘 숫자가 있었고, 늘 순위가 있었고, 늘 확인할 순위표라는 감각이 있었다.
왜 그것들을 만드는 일이 진전처럼 느껴졌는가
이 부분은 솔직하게 짚어볼 가치가 있다. 왜냐하면 그 느낌이야말로 함정이었기 때문이다. 전략을 생산하는 일은 가장 문자 그대로의 의미에서 생산적으로 느껴졌다. 나는 무언가를 생산하고 있었고, 그것들에는 점수가 있었으며, 그 점수는 움직였다. 모든 세션은 더 채워진 폴더와 재편된 리더보드로 끝났다. 내 뇌가 일을 감지하는 데 사용하는 모든 신호로 보자면, 나는 열심히 일하고 있었고 어딘가로 나아가고 있었다.
내가 하지 않고 있던 일은 그 활동 전체가 어떤 의미라도 있는지를 묻는 것이었다.
리더보드가 실제로 측정하고 있던 것
왜냐하면 그 순위가 실제로 반영하고 있던 것은 이것이기 때문이다. 각 전략은 그것이 다듬어진 바로 그 고정된 역사의 한 조각에 대해 점수가 매겨지고 있었다. 그래서 내 리더보드의 꼭대기로 올라간 그 전략은 반드시 시장을 가장 잘 이해한 전략이 아니었다. 그것은 더 흔하게는, 그 특정한 과거의 우연들과 자신의 특정한 형태가 가장 가깝게 맞아떨어진 전략이었다.
나는, 제대로 깨닫지도 못한 채, 과적합을 보상하고 그에 대해 트로피를 나눠주는 기계를 만들어버렸던 것이다. 그 리더보드는 연구처럼 느껴졌다. 그것은 내 추측들 중 어느 것이 한 구간의 데이터에 대해 가장 운이 좋았는지를 가리는 시합에 더 가까웠다.
더 깊은 문제: 모든 전략은 얼어붙은 추측이었다
그 토너먼트 밑에는 더 근본적인 실수가 있었다. 손으로 만든 모든 규칙은 내가 직관 — 시장은 저것 다음에 이것을 하는 경향이 있다 — 을 가져다가, 마치 그것이 사실인 것처럼 시스템 안에 얼려 넣은 것이었다. 하지만 시끄럽고, 붐비고, 적대적인 시장에 대한 내 직관들은 대부분 그저 그것, 즉 추측이었고, 그다지 신뢰할 만하지도 않았다. 그리고 틀린 추측을 코드 안에 얼려 넣는다고 해서 그것이 덜 틀리게 되지는 않는다. 그것은 주로 그것을 알아차리기 더 어렵게 만들 뿐이다. 왜냐하면 이제 그것은 이름과 점수를 가진 전략 안에, 검증된 아이디어의 의상을 입은 채 묻혀 있기 때문이다.
얼어붙은 추측들로 가득 찬 폴더는 지식의 체계가 아니다. 그것은 발견처럼 보이도록 서식이 입혀진, 내 자신의 의견들의 모음이다.
컬렉션 전체를 묻기
결국 나는 당시에는 포기하는 것처럼 느껴졌던 그 일을 했다. 나는 그것들을 삭제했다. 리팩터링한 것도 아니고, 나중을 위해 따로 치워둔 것도 아니다 — 삭제했다, 그 동물원 전체를. 내 가장 영리한 아이디어들의 폴더는 빈 폴더가 되었다. 그것은 정말로 불편했다. 그 전략들은 내 것이었고, 각각은 내 노력과 내 자부심의 작은 산물이었다.
하지만 그것들을 간직하는 일은 그것들을 묻는 일보다 더 비싸게 먹히고 있었다. 그것들이 존재하는 한, 그것들은 나를 계속 튜닝하도록, 계속 토너먼트를 다시 돌리도록, 그 움직임을 진전으로 계속 착각하도록 부추겼다. 그것들을 삭제하는 일은 그 거짓된 길 전체를 닫아버렸고 나를 다른 질문 쪽으로 밀어붙였다.
왜 무덤 그 자체가 교훈이었는가
가치는, 드러난 바로는, 결코 어떤 개별 전략 안에 있지 않았다. 그것은 무덤 전체의 형태 안에 있었다: 정성껏 만들어진 열두 개의 자신만만한 이론들, 그리고 그중 단 하나도 내가 신뢰할 수 있는 검증으로 뒷받침되지 않았다는 것. 그것이 발견이었다. 그 패턴은 내가 들으려 하지 않으려 애써왔던 무언가를 내게 말해주고 있었다 — 내 직관들은, 그 자체만으로는, 엣지가 아니라는 것, 그리고 시장에 대해 영리한 것과 시장에 대해 옳은 것은 같은 것이 아니라는 것.
죽은 전략 하나는 실망이다. 같은 손으로 만들어진 그것들의 무덤은, 그 손에 관한 정보다.
전략들 대신 내가 간직한 것
그래서 나는 내가 엣지의 원천이 되려는 시도를 멈췄다. 내 추측들을 규칙으로 인코딩하고 순위를 매기는 대신, 나는 스스로 구조를 찾을 수 있는 무언가를 만들려고 했다 — 내 직관들을 실제로 결정을 내리는 시스템 부분에서 빼내고, 내 의견이 아니라 표본 외(out-of-sample) 증거가 더 많은 결정을 내리도록 하면서 — 내 자신의 모델링 선택들은 사실이 아니라 검증되어야 할 가정으로 다루는 것. 나는 그다음에 온 시스템의 핵심에서 손으로 쓴 규칙들을 제거한 일에 대해 다른 곳에서 쓴 적이 있다. 이 무덤은 그 확신이 태어난 곳이다.
전략들은 모두 죽었다. 살아남은 것은 그것들 중 무엇보다도 더 작고 더 가치 있는 것이었다: 내 자신의 영리함에 대한 지속적인 불신, 그리고 데이터가 나와 의견을 달리하도록 내버려두는 것에 대한 선호. 그것은 그 폴더 전체가 이제껏 가졌던 가치보다 더 많은 가치가 있었다.
— 시그널도 없고, 수익도 없으며, 투자 자문이 아니다.