[통계, 파이썬] 데이터분석 능력 기르기 2. 빅데이터의 저주, 파이썬으로 구현하기
ฝัง
- เผยแพร่เมื่อ 15 ต.ค. 2024
- ⭐️ 클래스101 강의 오픈했습니다 ⭐️
포트폴리오에 활용할 수 있는, 프로젝트에 활용할 수 있는 데이터 분석, 예측 모델, 클라우드 서비스까지 강의를 만들었습니다. 강의 오픈 전, 구독자분들 대상으로 쿠폰 코드 데이터사이언티스트이지영을 입력해주시면, 추가로 할인 받을 수 있습니다.
👍 class101.page....
안녕하세요.
오픈소스 데이터와 실제 데이터는 어떤 차이점이 있을까요? 실제데이터는 왜 분석하기 어려울까요? 빅데이터 분석이 쉽지 않은 이유, 차원의 저주(Curse of dimensionality)를 파이썬 matplot lib통해 구현해보았습니다.
Business email : statnmath.datascience@gmail.com
--------------------------------------------------------------------------------------------------------------------
참고자료
www.cc.gatech....
en.wikipedia.o...
naysan.ca/2020...
![[#데이터분석 능력 기르기 4] 데이터 분석 중 꼭 필요한 작업 + #파이썬 실습](http://i.ytimg.com/vi/anqVS-vOv2g/mqdefault.jpg)
안녕하세요! 영상 감사히 잘 보았습니다. 통계 관련해서 유트브에 많은 영상이 있지만, 가장 어떠한 insight가 느껴지는 영상이였습니다. 다음 영상 upload 기다리겠습니다. 감사합니다!
감사합니다. 제가 데이터 사이언티스트 관련 책 집필중이라 유튜브에 소홀하고 있는데요. 내년 초 책이 출간하는데로 영상 자주 올리도록 하겠습니다~
프로그래밍으로 구현하실 때 진짜 개멋있어요… 곧 데이터분석 국비학원에서 배우는데 영상 보고 설렙니다…
감사합니다 잘 보고 있어요!
차원과 차원 공간의 차이점이 뭔지 혹시 알 수 있을까요?
변수가 하나씩 늘어날때 차원도 하나씩 늘어나는데 여기서 변수를 그래프에서의 축, 데이터 테이블에서의 column으로 생각하면 되는 건가요? 차원공간은 단순한 데이터 포인트가 아닌 거 같은데 차원공간은 데이터값의 범위 같은 것인가요?
저번에 답글 남겨주셔서 감사합니다. 많은 도움이 됬습니다.
말씀대로 통계학 공부는 독학하기에는 힘들거같다는데 동의하는데요. 혹시 현직자가 생각하기에 의미있는 수준의 통계학 지식은 어느정도 까지인가요?
학부과정 수준은 당연해보이지만 수학자 통계학자가 아닌 이상 배움의 깊이가 제한적일게 당연할거같은데, 알려주시면 감사하겠습니다!
안녕하세요~
제가 뭔가 오해를 일으켰나봐요. 어떤 분야든 독학하는건 쉽지 않죠. 하지만 본인의 의지가 있다면, 그리고 방향성이 있다면, 온라인 강의도 많고, 유튜브에도 유명 대학 강의도 들을 수 있어서 독학은 가능하다고 생각해요.
"의미있는 수준의 통계학 지식은 어느정도" - 이게 의미가 있나 싶어요. 이 정도 해야 의미있는 수준이야, 라며 장벽을 만들지 않으셨으면 합니다.
이 분야에 진입하는 신입인 경우 모든걸 다 알아서 일을 시작한건 아니라고 생각해요. problem solving 능력이 있으니 진입을 할 수 있었던게 아닐까요?
회사마다 다르겠지만 어떤 곳은 academic하게 일을 할 수 있겠고요. 그런 경우 새로운 논문도 제한된 시간내에 이해도 하고 그걸 새롭게 적용도 하고 그렇겠죠. 이럴 경우, 다 아는 사람이 일을 하는게 아니라 논문에 있는 수학에 거부감 없는 사람이, 처음엔 이해를 못하겠지만 여러번 보게 되어 결국엔 어느정도 이해 할 수 있는 사람이 일을 합니다.
물론 이런 분위기가 아닌 곳도 많아요. 통계 지식 없이 정말 코딩으로만 접근해서 하는곳도 있을 거고요. 그런데, 제 생각엔, 정말 전문가라면 데이터 분석이나, 모델링, validation등에서 왜? 라는 질문에 수학적인 로직이나, 통계 바탕으로 한 대답은 할 수 있어야한다고 생각하거든요.
하지만 그렇다고 전문가가 수학, 통계에 깊은 지식을 가지고 있는 사람은 아니고요, problem이 있을때 그걸 해결하기 위해 그 분야를 깊게 파고들 수 있는 능력을 가진 사람이라 생각해요.
다르게 생각하는 분도 계실겁니다. 여기에 정답은 없어요. 그저 저의 커리어 목표? 방향성?에 대해 적어본 것입니다.
Data Scientist이지영 감사합니다🙂 다니고있는 대학에서 빅데이터 학위 과정이 생겨서 열심히 이수중에 있습니다. 진로 결정에 있어 큰 도움이 되주셔서 감사합니다. 최근에는 홈쇼핑 데이터를 가지고 편성표를 제안하는 대회에 참가 중인데, 공부를 하면 할 수록 부족함을 많이 느끼네요. 평생 공부해야겠구나.. 싶은 생각에 좀 무섭기도 하구요 ㅎㅎ .. 같은 업종 선배님으로써 앞으로도 잘부탁드립니다! 건강하세요
안녕하세요, 현제 영상컨텐츠 직종에 종사하고있는 영상 디자이너 입니다. 데이터리터러시 기반의 의사결정 내재화의 중요성을 깨닫고 3개월 전부터 파이썬 기초 문법을 공부 하고있습니다. 현재는 라이브러리를 이용한 데이터 분석 기초 코드를 일하는 틈틈이 따라하고있는데 새로운 공부에 대한 설레임과 조금씩 성취감을 느끼고있습니다. 다만 고민이 있다면 기초 문법 및 코드를 완벽히 구사하기위해 기초를 단단히 하고 다음 응용단계(데이터 분석. 전처리 정제 등)로 넘어가는 것이 좋은지 아니면 바로 파이썬을 이용한 데이터분석을 병행하는것이 좋은지 잘 모르겠습니다.
이번 스텝에서 시연해주신 코드 따라하면서 다 이해가지 않았지만 재미있었습니다. 더욱 성장하여 제가 몸 담고있 분야에 도움이 되었으면 하는 바램입니다.
좋은 강의 감사드립니다.
요새 몸이 좋지 않아서 잠시 쉬는 시간을 가졌습니다. 정성스런 댓글 남겨주셨는데, 저 역시 정성스런 댓글을 남기는게 예의인걸 알면서도 조금 늦어졌습니다. 죄송합니다.
새로운 분야로 공부하는게 쉽지 않은데, 정말 응원합니다. 한동안 제가 클래스101 강의와 책 마무리 작업하면서 유튜브에 손을 놓고 지냈는데요. 처음 접하는 분들을 대상으로 무료 컨텐츠를 제작하고 있습니다. 조금 기다려주시면 좋은 영상으로 보답 드리도록 하겠습니다.
지금은 즐거운 마음으로 관심있는 부분 위주로 접근해보시고, 어려운건 건너 뛰셔도 좋다는걸 말씀드리고 싶어요. 퍼즐 맞추듯이 잘 모르겠으면 언젠간 빈 공간의 퍼즐이 맞춰지겠지- 라는 마음으로 그렇게 꾸준히 진행하다보면 실력이 많이 향상될 거라 생각합니다. 공부는 흥미를 잃지 않는게 중요하다고 생각해서요.
응원하겠습니다!
안녕하세요! 데이터 사이언스에 관심을 가지고 진로를 가보고자 하는 23살 대학생입니다. 경제학과를 전공하고 있는
현재 군복무를 마치고 2021년에 3학년 진학을 앞두고 있습니다.
혹시 23살에 비전공이고 관련 경험이 하나도 없고 통계학에 대한 관심과 열정만 있는 학생이 데이터 분석 관련 진로를 선택하고자 한다면
너무 어리석거나 늦은 일일까요??
아직까지 이쪽 관련 진로가 너무 흥미롭고 앞서 영상에 올려주신 '비전공자가 데이터사이언티스트로 취업할 수 있는지, 취업 팁' 영상에서도 어느 정도 확률도 괜찮게 나와서 질문드립니다 ㅠㅠ 마음가짐의 문제겠지만 정말 현실적인 조언이 듣고 싶어 어리석은 질문 드렸습니다
최근 고민이 많았는데, 이렇게 깔끔하게 잘 정리해주시는 영상들, 특히 통계학 지식 관련 영상들도 잘 보고 있습니다. 저의 진로 관련 고민에 큰 도움이 되어주셔서 정말 감사드립니다
안녕하세요. 군 생활 하느라 고생 많았어요. 감사해요~ 제대 후 어쩌면 신나게 놀고싶을텐데 진지하게 진로 고민하는 것도 참 멋집니다.
23살이면 정말 무엇이든 해도 되고, 또 할 수 있는 나이거든요. 공부하고 무언가에 몰입하고, 이 과정이 나중에 결과를 떠나 자신에게 도움된다고 생각해요.
나이에 대한 걱정은 하나도 하지 말고, 통계학 뿐 아니라 데이터 과학이 어떻게 우리 삶에 들어오는지 현상도 보고, 경진대회도 나가보고, 관심있는 친구들과 얘기도 해보고 정말 이 과정을 즐기셨으면 좋겠어요. 응원합니다!!
@@datascientist8756 좋은 말씀 너무나 감사드립니다!!ㅎㅎ방금까지 유튜브 파이썬 강의를 보며 따라하다가 이제 누웠네요.. 아직까진 흥미롭고 재밌는 것같습니다. 아직 갈 길이 너무나도 멀지만 한번 해보겠습니다 ㅎㅎ
감사합니다!
혹시 일반 쿼티 타자기 쓰시나요...? 타자 엄청 빠르시네요 ㅋㅋ
안녕하세요. 강의를 보다가 타자 속도가 너무 빠르셔서,
재생속도를 높였는지 확인 했는데, 보통으로 되어 있더군요.
일상적인 타자 속도 이신건가요?
편집 중에 속도를 빨리 할때도 있는데, 빨리 돌리는 소리가 아니라면 제 속도가 맞을거예요. 무슨 코드를 써야하는지 미리 생각하고 영상을 만든거라서 빨리 적었나봅니다. ^^;;