fait팀의 해명 반박.
게시글 주소: https://dev.orbi.kr/000688260
1. Fait Accompli '11 보고서의 백분위, 합격확률 추정 과정
d = 오르비 회원들의 점수 분포
c = 한국교육과정평가원의 채점 결과 발표 자료
p = 백분위 추정치
xn = 각 학과의 합격확률 추정치
라고 할 때,
d와 c의 여러 구성 요소들을 변수로 한 계산을 바탕으로 p가 산출되며, 이와는 독립적으로
d와 c의 여러 구성 요소들을 변수로 한 계산을 바탕으로 xn이 산출됩니다.
즉, p와 xn 사이에는 연결 고리가 없습니다.
d와 c 그리고 +@를 바탕으로 산출된 것이 p인데
d와 c 그리고 +@를 바탕으로 산출된 것이 xn 입니다.
그래서 Fait Accompli '11 의 합격 확률에는 별 차이가 없어도, 백분위는 작년에 비해 다르게 표시될 수 있습니다.
이 두가지가 독립적으로 연결 고리가 없다는 것을 밝힐려면 +@를 공개해야 합니다.
(실례로 각 학과마다 비례 수준은 다르지만 백분위에 합격 확률은 비례했습니다.)
(이 역시 +@를 전부 공개하기 전까진 받아들이긴 어렵군요.)
2. 백분위 오차
현재 여러 자료들을 취합해 오차의 크기를 분석하고 있습니다.
다만, 모든 분들께서 2010학년도 이전의 백분위에 문제가 없다는 전제를 하고 계시는데, 저희는 2010학년도의 백분위가 실제에 비해 비관적으로 추정이 되었다고 판단하고 있습니다.
즉, 예를 들어, 작년에 임의의 학과의 커트라인이 0.40%로 알려져 있었다면, 그것은 실제로는 0.40%가 아니라 (여전히 추정이라 오차가 있을 수 있지만) 아마도 0.30% 정도에 더 가까웠다는 것입니다.
(이 수치들은 아직 분석 과정 중에 있어서, 변경될 수 있으며, 정확한 차이는 계산이 완료되어야 발표할 수 있습니다. 다만, 고려되지 않고 있는 요소에 대해 설명드리기 위해 이러한 수치들을 예로 들고 있는 것입니다.)
즉, 게시판에서 널리 공유되고 있는 생각이 '연대 경영대 커트라인은 0.4% 내에서 역사적으로 형성된 바가 없다' 와 같은 것인데, 저희가 짚어드리고 싶은 점은, '여기에서 말하는 0.4% 라는 값이 오르비의 작년 추정치인데, 그 추정치는 실제에 비해 비관적으로 추정된 것이고, 실제 커트라인의 백분위 값은 그보다 더 작았다.' 라는 것입니다.
올해의 추정에 대해선 분석이 완료되지 않았으나, 아마도 실제에 비해 낙관적으로 추정이 되지 않았나 추측하고 있습니다.
예를 들어, 올해 저희가 0.25%라고 추정한 지점은 실제로는 0.30% 정도에 더 가까웠을 수 있다는 것입니다.
올해의 결과로부터 더 많은 자료를 수집할 것이고 이 자료들을 오차를 보정하는 데 활용할 것이기 때문에,
아마도 내년에는 실제 0.30%에 대한 추정치가 0.28%든, 0.32%든 간에 실제에 더 가까운 방향으로 움직일 가능성이 높고, 그런 이유로 저희는 'Fait 가 정확도가 더 높은 방향으로 움직일 것이다' 라는 말씀을 드린 것입니다.
정확한 오차의 크기에 대해서는 분석 중이며, 이에 대해서는 논문과 같은 형식으로 2월 중 발표할 예정입니다.
현재 정확한 오차 계산을 위해 금년도 수시 합격자의 수능 점수 표본을 수집하고 있습니다.
<-fait팀의 말씀대도라면 매년도 입시가 끝난 직후에 익클 백분위의 오류를 알 수 있었을텐데 왜 공개하지 않았나 의문이 갑니다.
fait의 신뢰도 하락 방지인가요? 또한 이 사실을 지금 공개하는 것은 "매년 백분위는 오차가 있었는데 합격선은 맞았으니까 백분위는 어찌되든 상관없다"
라고 말하는 것으로밖에 보이지 않습니다.
3. 연대 경영대 합격선 상승 요인
위와 같은 백분위 오차 요소로 인해 실제 백분위 커트라인에는 차이가 없었다고 하더라도, 겉으로 표시되는 합격선의 백분위 커트라인은 더 높아졌(퍼센트 수치가 더 작아졌)겠지만,
정원 감소 등 다른 여러 요소에 의해, 실제 백분위 커트라인 자체도 급등하였다고 판단됩니다.
이에 관해서는 향후 완성된 글 형태로 더 자세히 설명드리도록 하겠습니다.
<-무슨 소리인지 모르겠군요 실제 백분위 커트라인에는 차이가 없다니요. 10 이전은 비관적으로 표기했고 11은 낙관적으로 표기했는데
차이가 안 생길수가 있습니까? 다른 요소도 실제 백분위 커트라인에 영향을 미쳤지만 백분위 오차요소도 연경 쏠림 현상을 심화시켜 실제 백분위 커트라인에 영향을 끼쳤다고 봅니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
수학 4등급만 받으면 2 0
쫀득하게 인서울 할 수 있는데
-
엘든링 왜 자꾸 멈추지 1 0
컴퓨터 좋은건데 씨발
-
목 졸라줘 5 1
켁켁켁 숨막혀 ㅜㅜ
-
시험지에 따라서 난이도가 가장 극단적으로 달라지는 번호같음....
-
개쉽게 풀리는데 이거 맞나
-
정시로 갑시다 8 0
내신반영을 노려서 내신 깡패 정시러
-
나왔어 12 0
다시감 근데 저게 왜 이륙햇냐
-
갑자기생각난썰 1 1
고1 2학기 학급회장선거때 후보가 2명이엇는데 그 친구들 둘이 합의하고 한명이...
-
그만하고 잘까 1 0
흐름이 끊겨버렷네
-
세기말 수능 1 1
2000학년도 대학수학능력시험
-
강은양t 0 0
현역 고3이고 작년까지 모고 3~4등급 나왔는데 지금부터 강은양t 들으려고 합니다....
-
2시열차 1 0
출발
-
지금 강민철 현강 다니고 있는데 저랑 너무 안맞는 느낌이 심하게 들어서...
-
뭘 해야하나요 0 0
이번에 고등학교 2학년 된 이공계 지망하는 지방 일반고학생입니다. 생기부를 제대로...
-
이게 오르비를 재밌게 오래하려면 10 4
수험생활을 지속해야 함
-
에ㅔㅔㅔㅔㅔㅔㄴ들리스레인ㄴㄴ 0 1
폴온마이헐트 코코로노 키즈니ㅣㅣㅣ
-
내 이상형 중단발에 속눈썹 1 0
-
우와 보추야동 많이떴다 2 2
보다자야지
-
심심한데 무물보 5 0
응애 나 아가학생
-
본인 물1 점수 꼬라지 0 1
3모 48점 (99) 5더프 47점인가였는데 시험이 어려웠어서 전국석차 30등쯤...
-
오후8시부터자다가깼더니 1 0
다시잠이안오네.. 비상..!!
-
생각나는구나
-
ㅇㄴ근데 0학점 패논패과목을 오ㅑㄹ케 빡세게시켜 0 0
그냥 좀 봐주면 안되나
-
-
시발점 한 다음 스블 0 0
고2이고대수 개념원리, 쎈, 고쟁이 했습니다개정 시발점 사놓은 게 있어서...
-
러셀 외부생 더프 성적표 0 0
문자로 발송되나요?? 아님 직접 찾으러 가야햐나요??
-
원래 사람은 별을 쫓아 달려갈 때 가장 빛나는 법이여설령 닿지 못할지라도적어도 내...
-
저걸 어케 함 진짜 와.. 원과목 중 생1만 수능공부로 안해봤는데 안하길잘한듯
-
시발 나 개폐급임 2 1
조별과제 하는족족 내것만 교수님 피드백 나오고 술처먹다 팀원들한테 자료 제출 개늦게하고 자퇴마렵다
-
딱 한 마디만 하고 자러감 9 3
미쿠 ㅈㄴ 예뻐어~~~~~~~~~~~~
-
중앙대 가기 59일차 3 1
안녕하세요 중앙대29학번 부산사나이 이동현입니다 음 오늘이 벌써 59일차군요...
-
이제 좀 자보실까 11 1
음음
-
리젠존나느리네 1 0
오르비망함?
-
너무멍청해짐 1 0
ㅜㅜㅜㅜㅜ
-
생윤 진짜 1도 모르는 쌩노베인데 누구 듣는 게 좋을가여
-
15살과 엄마 그 사이는 2 0
뭐라함 급함
-
대신 연세대 가겠다 선언
-
작년 10모 20번 0 0
이렇게 푸는거 맞나..?
-
-
위키하우 도움 ㅈㄴ 안되네 6 0
ㅗㅗㅗㅗㅗㅗ
-
새르비 할수록 4 0
헛소리가 늘어가는듯
-
아니 난 신라면 쳐돌이라 5 0
신라면만 먹는데….
-
-
내가사실은생명과학을좋아함 1 0
수능말고 그냥생명과학
-
. 11 1
-
님들 최애 과목 말해보셈 7 0
난 국어
-
님들 최애 라면 말해보셈 10 0
난 신라면
-
라면이랑 과자 안먹은지 6일차 2 0
후후
-
자지 버섯 4 0
나는 자연인이다에 나온 버섯입니다
-
통합사회 미녀 선생님 0 0
최성주 쌤 보고 의대 가겠습니다
그만 하시죠.
1.
Fait Accompli 프로그램에서 xn 을 산출할 때 p가 변수에 없습니다.
2.
평가원이 정확한 백분위를 발표하지 않는 상태에서, '정확한 백분위' 값이라는 것 자체가 없으며, 따라서 '정확한 오차' 도 있을 수 없습니다. 우리가 지금 이야기하고 있는 오차 조차도 추정치입니다.
작년(2010학년도) 입시 결과가 발표된 이후 수집된 추가적인 자료들을 바탕으로 조금 더 정확할 것이라 예상되는 추정치를 산출할 수 있었겠습니다만, 입시가 모두 끝난 상태에서 또다시 지난 결과에 대한 추정치를 발표하는 것도 모양새가 이상하다고 생각이 됩니다.
대신 그렇게 새로 계산된 수치는 다음 해에 자료를 발표하는 데 사용되어 추정 오차를 줄이는 데 기여하게 됩니다.
올해에는 다시 좀 더 정확한 추정치를 '논문 수준으로' 발표하겠다고 하는 것은, 유료로 판매하고 있는 Fait Accompli 의 정확도를 높이기 위해 그만한 노력이 필요하다고 생각하고 있기 때문입니다.
3.
'실제 백분위 커트라인에는 차이가 없었다고 하더라도'는 설명을 위한 가정문입니다.
차이가 없었다고 가정을 하더라도 2에서 언급한 요소로 인해 겉으로 표시되는 합격선의 백분위 커트라인이 더 높아졌을텐데, 거기에 더해서 추가적인 백분위 상승 압력이 있었으니, 추정 백분위가 훨씬 더 올라간다는 의미입니다.
1. p와 xn 모두 +@를 제외하고는 같은 자료에서 산출되는 것이라 말씀 하셨습니다.
그렇다면 p가 변수에 없고 전혀 영향을 미치지 않는다는 것을 증명하시려면 +@를 제시하는게 순리라고 생각됩니다.
2.그렇습니다. '정확한 오차'도 있을 수 없습니다. 하지만 오차라는것은 무시할 수준으로 미미할 수도 있고.
그냥 넘길 수준이 아닐정도로 클 수 도 있습니다. 여기서 이 둘을 판단하는 기준은 여러 가지가 있지만, 가장 보수적인 판단 방법이
산출자의 인정입니다. 올해 입시를 겪으면서 작년도 백분위에 대해 어느 정도 이상한 느낌을 받았지만. 산출자 분의 말씀이 없기 떄문에
그냥 넘어갔습니다. 하지만 이제 페이트 팀이 오차를 공식적으로 인정하였으니 그에 대해 물어보는 겁니다.
3.그럼 그렇게 쓰셔야죠ㅋㅋ 잘못하다간 여러사람 오해하겠습니다
1. 은 무슨 말씀이신지 잘 이해가 가지 않습니다. 자세히 설명해 주실 수 있나요?
2. 예전 댓글에서 보면 '치명적인 오차를 오르비에서 인정하였다' 와 같은 표현을 쓰시던데, 정확히 어느 문구가 그에 해당하는지 인용해 주실 수 있나요?
3. 귀하께서만 오해하신 것 같습니다.
d = 오르비 회원들의 점수 분포
c = 한국교육과정평가원의 채점 결과 발표 자료
p = 백분위 추정치
xn = 각 학과의 합격확률 추정치
라고 할 때,
d와 c의 여러 구성 요소들을 변수로 한 계산을 바탕으로 p가 산출되며,
이와는 독립적으로 d와 c의 여러 구성 요소들을 변수로 한 계산을 바탕으로 xn이 산출됩니다.
여기에서 백분위 추정치와 합격확률 추정치를 왜 독립적인 변수라고 상정했는지부터가 의문인데요.
서로 관련있지 않나요? 혹시 개발자님은 어떤 이유로 이걸 배제하신 건가요
p가 추정치가 아니고 정확한 수치인 경우 xn는 반비례하는 것이 맞습니다. (p가 커질수록 xn은 작아짐)
2008학년도의 경우 한국교육과정평가원이 모든 수험생의 채점 결과를 공개하였기 때문에, 지금의 xn에 해당하는 값을 계산할 때 p를 변수로 넣었었고, 결과적으로 합격선 추정치가 매우 정확하였습니다.
하지만 그 이후에는
c가 정확한 자료,
d는 비교적 신뢰할 수 있는 raw 데이터라고 할 때
1. (d,c) => p 로 가는 과정에서 오차가 생기고
2. (d,c) => xn 으로 가는 과정에서도 오차가 생기기 때문에,
3. (d,c) => p => xn 의 단계를 거치면 오차가 누적되게 됩니다.
만약 1과 2에 매년 전혀 오차가 없다면 서로 다른 해의 p와 xn도 강한 상관관계를 갖게 됩니다.
p와 xn은 서로 다른해라도 강한 상관관계를 가지는 것이 맞습니다.
대학은 서열이 있고, 상위 백분위에 따라 가니까요.
여기서 문제점은
수험생들의 환산점수에 따른 p가 잘못 산출되었다는 겁니다.
그렇다면 p와 강한 상관관계를 가지는 xn도 잘못 산출되지 않았을까요?
p와 xn은 강한 상관관계를 가집니다.
그런데 수험생의 점수에 따른 p가 잘못 나왔습니다.
그렇다면 xn도 잘못 산출된 것이 아닌가요?
서로 다른해의 p와 xn이 상관관계가 있는것은 이 일과 전혀 관련이 없습니다.
저희의 점수에 따른 p를 이번년도에 잘못 산출하셔서 xn에 영향을 미치게 한 것이죠.
도데체 앞줄과 뒷줄의 내용이 왜 이리 모순된지 궁금합니다.
또한 d,c->p로 가는 과정에서 발생하는 오차와
d,c->xn으로 가는 가정에서 발생하는 오차가 어느 정도 겹치는 부분이 있다고 볼 수 있습니다.
실례로 올해 fate도 p와 xn이 반비례하였습니다.
말을 해도 알아듣지를 못하시니.. 이길 자신이 없네요.
글이 두서없이 썻네요.
제가 묻고 싶은 점은 이것입니다.
d,c->p를 산출했는데 p가 오류가 났다면
같은 원자료를 바탕으로 산출한 xn은 왜 오류가 발생하지 않았는지입니다.
http://orbi.wizet.com/bbs/board.php?bo_table=xi_orbi_yk&wr_id=1152417&sca=&sfl=&stx=&spt=0&page=0 에 답변달아드렸어요.
아 진짜 짜증난다ㅋㅋㅋ 추하게 왜 이러지?
님이 짜증내던 말던 그런 사소한 일엔 신경 안쓰니까 짜증내세요 ㅋㅋ
네 열심히 하셔서 6만8천원 환불 꼭 받으셔서 지친마음을 조금이라도 달래시길 바랍니다.
네 님도 제가 계속 이럴동안 열심히 혼자 방안에서 짜증내시길 바랄게요
이제 그만하세요.
그만 하라시는 분들.. 오르비는 운영자 말에 반박도 못하는 사회인가요?
글들 찬찬히 읽어보니 페이트팀이 좀더 해명해야 할 부분이 있는거 같구만요.
그리고 페이트팀... "말을 해도 알아듣질 못하시니... 이길 자신이 없네요" 라니요,
운영진이 회원을 이렇게 기만해도 되는건가요?
그 발언은 제가 순간적으로 감정 통제를 못했네요. 앞으로 주의하겠습니다.