본문 바로가기

데이터사이언스11

[임상시험] CDISC 데이터 표준 - SDTM과 ADaM 데이터 [임상시험] CDISC 데이터 표준 - SDTM과 ADaM CDISC(Clinical Data Interchange Standards Consortium)란? 임상시험에서 수많은 종류들의 데이터가 수집된다. 신약개발 과정에서 수집되는 몇 가지 데이터의 예를 들자면 약의 안전성(Safety)에 대한 대한 데이터, 약물의 효능(Efficacy)에 대한 데이터 혹은 약물 동태학에 대한 Pharmacokinetics(PK) 등 이 있다. 이외에도 환자나 약물에 대한 다양한 정보들도 CRF(Case Report Form)로 부터 수집이 된다. 그런데 문제는 각 사이트마다 통일된 규정이 없어서 우리가 받게 되는 데이터는 그 변수의 이름도 다양하고 CRF의 디자인에 따라서 데이터의 구조와 정의가 스터디마다 달라진다... 2022. 12. 27.
[잡썰] 데이터 사이언스 잡을 시작하기 전에 생각해봐야 것 - 전처리 과정의 고욕 데이터 사이언스 잡을 시작하기 전에 생각해봐야 것 - 데이터 전처리의 고욕 예전에 페이스북에 일기 형식으로 남겼던 글인데, 데이터 사이언스 관련 직업, 연구에 관심이 있으신 분들이 한번 쯤은 생각해보시면 좋을 것이라는 생각에 블로그에도 글을 남긴다. 오늘 데이터셋 하나를 전처리 하기위해서 10시간 이상을 컴퓨터 앞에서 보냈다. 데이터사이언스는 지금 굉장히 핫한 분야이다. 하지만 그것만 보고 이 분야를 직업을 택하는 일은 별로 추천 하지 않는다. 왜냐하면 데이터 분석을 하기 위해서 보내는 시간 중에 거의 대부분은 이 지루한 전처리 작업의 연속일 때가 많기때문이다. 내가 이 과정이 반 중노동이라는걸 깨닫기에는 그리 오랜시간이 걸리지 않았다. 복잡하고 Fancy한 알고리즘을 적용하고 시험하는건 Simulati.. 2020. 9. 10.
[미국 통계학 대학원 진학 후기] Miami University Department of Statistic- Testimonial Interview [미국 통계학 대학원 진학 후기]- Miami University Department of Statistic Intro 내가 이번 8월에 졸업을 한 Miami University 통계학과에서 졸업생 중 몇 명을 뽑아서 학과 홍보용 인터뷰를 하고자 한다고 했는데, 학과에서 나를 인터뷰 하고 싶다고 혹시 인터뷰를 할 수 있는지 물어왔다. 보통 이런 종류의 인터뷰를 Testimonial Interview라고 칭한다고 한다. 이야기를 들어보니 우리 학과의 Department Chair가 Purdue에서 몇 가지 학과 홍보 포스터를 보고,인상이 깊었던지 우리 학과도 이런것을 만들자고 제안을 했다고 한다. 마침 내가 이사를 한 곳이 학교와 그리 멀지 않고, Miami 통계학과에서 내가 배우고 받은 것이 너무나 많았.. 2019. 9. 26.
[미국 통계 전공 취업] 미국 유통 대기업 데이터 분석가 인터뷰 및 합격후기 [미국 통계 취업] 미국 데이터 분석가 인터뷰 및 합격후기 -유통 대기업 지원과정 & 스태핑 컴퍼니 작년 3월 즈음 내가 구직 사이트에 올린 Resume를 보고 한 스태핑 컴퍼니에서 전화가 왔었다. 스테핑 컴퍼니들은 큰 클라이언트들이 Contractor를 뽑을때 주로 이용하는 방법인데, 한국의 계약직과는 조금은 다른 개념이다. 보험 같은 배네핏은 적을지라도 Contractor가 실 수령액은 더 많이 받는다. 계약 기간 중에 일을 잘한다면 직접채용이 될 수도 있겠지만, 일에 잘 적응을 못할 경우에는 임의로 정리가 될 수 있기 때문에 리스크가 좀 큰 옵션이다. 전화를 해온 스테핑 컴퍼니에서 신시네티에 있는 유통 기업인 Kroger에서 데이터 분석가 오프닝이 있는데 혹시 이 포지션에 관심이 있는지 내게 물어보.. 2019. 8. 20.
[미국 통계학 대학원] 석사 디펜스 통과 [미국 통계학 대학원] 석사 디펜스 통과 Intro 대학원 과정이 학부과정과 다른점이 있다면, 졸업을 할때 본인의 리서치 분야에 대해서 Manuscript를 작성해서 그 내용에 대해서 일반 청중 앞에서 발표하고, 이후에 Oral exam을 보아서 이 학생이 정말 알고 있는지 테스트하는 과정을 거쳐야 한다. 보통 이를 학위 Defense라고 칭하는데, 대학원에서는 이 Defense 과정을 끝까지 마쳐야 졸업을 하고 학위증을 받을 수 있다. 석사야 사실 그렇게 깐깐하게 심사를 하지 않지만 박사의 경우에는 코스웍 이후에 졸업이 계속 늦춰질 수 있어서 인문계열의 경우 10년까지도 박사를 하는 경우가 있다. 이 과정을 통과를 하지 못하면 '수료'상태로 남게되며 학위는 수여되지 않는다. 그렇기 때문에, 이 최종 관.. 2019. 7. 26.
[미국 통계 전공 취업] 데이터 사이언티스트 잡 오픈하우스 후기 오픈하우스 과정 얼마 전 지난 학기에 데이터 사이언티스트 포지션으로 지원했던 Qutieont quotient technology라는 회사에 오픈하우스에 초대 받아 다녀왔다. 오픈하우스라는 것은 잠재적인 Candidate들을 불러서 회사에 대한 소개& 구경을 시켜주고 현재 일하고있는 직원들과의 네트워크의 장을 마련해주는 것에 목표로 하는 이벤트이다. 오픈하우스는 나도 처음이라 생소했는데, 캠퍼스 리쿠르팅에서 일차로 거르고 이차로 오픈하우스를 통해 Candidate에게 회사 구경도 시켜주고 파이널 인터뷰에 초대할 만한 사람을 찾아본다는 취지로 열었던 행사 같았다. 리쿠르터들이 커리어페어에 갔었던 근방의 대학교 3~4군데에서 대략 30명 정도의 학생들을 모집하였고, Leadership들이 나와서 회사의 소개를.. 2019. 3. 31.
문과생 미국 통계학과 대학원 진학하기 3. 영어 (GRE, TOEFL) 문과생 미국 통계학과 대학원 진학하기 3. 영어 (GRE, TOEFL) 선수과목을 성공적으로 완수했다면, 이제 다음단계인 공인 영어 시험을 준비해야 할 차례이다. 영미권 대학원 유학을 위해서는 크게 두가지 영어시험을 보아야 한다. 1. GRE - Verval, Quantitative, Writing 으로 구성 2. TOEFL - Reading, Listening, Speaking, Writing 두 시험 모두 ETS에서 주관하는 시험인데, 응시료가 정말 비싸다. 정신건강을 위해서 그냥 학원에 가자 개인적인 생각으론 평소에 영어 공부를 꾸준히 하지 않았다면, 강남의 학원에 가서 배우는 것이 가장 시간이 적게들고 효율적인 것 같다. 한번에 시험을 끝내지 못하면 GRE+TOEFL 두 시험을 보는데만 50만원을.. 2017. 9. 25.
[잡썰] 데이터사이언스 프로그래밍 언어의 선택 R, Python, SQL, SAS .. etc -처음 프로그래밍 언어를 배우는 과정은 고되다. 하지만 남들이 짜놓은 코드를 따라해보고 본인만의 아이디어를 적용해보다 보면 재미도 느낄 것이고 성취감이 드는 순간이 온다. 처음 데이터사이언스 분야에 입문하는 사람이라면 누구나 도대체 어떤 언어를 공부해야 할지 궁금해 할 것이다. 나 또한 그랬으며, 사실 이 언어라는 것이 하나를 제대로 해놓으면 다른 분야로는 전환하기가 굉장히 쉬움으로 사실 어떤 언어를 시작해도 상관은 없다. 하지만 개인적인 경험으로는 Python을 먼저 General 한 언어에 대한 이해를 가지고 난 이후에 SAS나 R 처럼 통계를 위해 특화된 언어를 배우는 것이 실력의 향상 면에서나 배움의 면에서나 훨씬 효율적인 것 같다. R이나 SAS를 먼저 배우고 Python을 배울 수도 있지만, .. 2017. 9. 25.
[잡썰] 데이터 분석가의 핵심 역량- 도메인 지식과 커뮤니케이션의 중요성 근무했던 사무실의 뷰사람 가득하고 늘 바쁜 서울, 그게 지겨워 조용한 미국의 시골의 College town에 왔지만 가끔은 북적거리는 이곳이 그립다. 작년 겨울에 나는 롯데멤버스라는 회사의 빅데이터팀에서 인턴으로 근무를 하였다. 회사에서 배치를 받고 업무의 흐름을 파악하기 이전엔 나는 부끄럽게도 데이터분석가라는 직업에 대해서 상당히 무지했다. 이곳에서 근무했던 경험은 이런 나의 무지함을 일깨워주는 동시에 내가 배웠던 알고리즘-분석 방법이 어떻게 실제 비즈니스에서 인사이트를 도출해 내고 마케팅에 활용이 될 수 있는지 배울 수 있었던 귀중한 시간이였다. 짧게나마 인더스트리에 몸을 담고나서 돌이켜 생각해보면 데이터분석가가 필요로 하는 역량이 이제는 무엇인지에 대해서 대충의 답을 얻은 것 같다. 이전엔 데이터 .. 2017. 9. 24.

티스토리툴바