영상에서는 임베딩 원리만 다루는 것처럼 보이지만 상품 등 커스터마이즈 된 데이터를 애드온처럼 LLM에 붙여주는 생성 방식을 RAG(Retrieval Augmented Generation)라고 합니다. Langchain이나 LlamaIndex 같은 프레임워크가 이미 나와있어서 다들 한 번 보시는건 어떨까 싶네요.
w2v를 필두로 영상에 소개된 vectorization 접근 방식이 한동안 핫했죠. 되게 유용하긴 한데 이런저런 한계점도 있습니다. 예를 들어서, - 너 참 잘 생겼다 vs 너 참 멋지다 - 너 참 잘 생겼다 vs 너 참 못 생겼다 이렇게 비교하면 뒤쪽 페어의 유사도가 더 높다고 판정해버리는 식입니다. 임베딩 자체가 기본적으로 언어의 의미보다도 문법적 구조에 영향을 많이 받는 편이라... 그래도 LLM에 쓰이는 대규모 데이터셋으로 훈련한 모델을 API 딸깍하면 쓸 수 있다는건 되게 편리하고 유용한 것 같네요.
불과 5년 전에는 박사님들과 싸워가면 임베디드로 유사도 거리를 구현해서 유사도 거리를 구현했었는데, 지금은 당연하다는 듯이 벡터 DB 등이 등장하는 거를 보면 발전이 빠른게 느껴지네요. 당시 논문을 쓰자고 했지만, 회사에서는 특허 내겠다고 해서 내긴 했는데, 특허는 그다지 유용하지 않았던 것은 덤... 참고 cos 거리는 각도라기보다는 다차원 벡터들간 거리 혹은 유사도에 더 가깝습니다.
일하기 싫을때 일 작게 쪼개는 방법같은거 아님 타이머 놓고 짧게 일하고 놀고 일하고 하는등 뭐 그런 팁좀 알려주세요. 일하기가 너무 싫어요 먹고는 살아야 하는데 아아아아.... Trello 에 Backlog, Todo, Ready, Doing, .... 등을 만들어놓고 todo ready doing 이 계속 늘어만가는중... ㅜㅠ
근데 이거 직접 훈련시키는것도 그렇게 안힘듬 word2vec sen2vec 이런 개념이 최근에 만들어진게 아니라 11년 전부터 쭉 컨셉이 이어진거라 훈련시키는것도 라이브러리 널렸고, 모델들도 널림ㅋㅋ 리소스도 토큰들이 작다보니 그렇게 심하게 요구되지도 않고.. 한 3년전에 내 개인pc로도 했으니...
@@TheAwaofficial 맞긴 한데요, 코사인 유사도는 두 벡터 사이의 거리와 정말로 아무런 관련이 없습니다. 쉽게 설명하자면 코사인 유사도를 계산하는 과정에는 두 벡터의 크기를 1로 만드는, 다시 말해 벡터가 반지름의 길이가 1인 원 위에 놓이도록 하는 과정이 포함되기 때문이라고 보시면 됩니다.
4:17 아니 API키를 공개했네.. ㄷㄷ
생각했는데 바로 고소 ㅋㅋㅋㅋㅋㅋㅋㅋㅋ
전 영상에서도 공개했는데 고소한다 했음 ㅋㅋㅋ
아이고 고소해 ㅎㅎ
@@Gogildong12지가 고소말고 뭘하겠음ㅋㅋㅋ
제가 잘 몰라서 그러는데 api 키 공개하면 안되는건가요? 돈내고 쓰는거에요?
@@oswin627 무료인 경우도 있지만, 챗지피티를 예로 들자면, 텍스트를 일정단위로 쪼개 놓은 '토큰'이라는 단위를 이용한 요금제를 채택하고 있는데, API를 통해 주고 받은 토큰만큼 종량제로 돈을 가져갑니당
2:47 "우리 같은 사람들"
애드미 꼴잘알 개추
이거보고 울었다
우리.. 라고 했다..
ㅋㅋㅋㅋㅋㅋㅋ
= ship ducks
이양반 좋은점
다른유튜버:이런걸 할 수 있어요! 신기하죠?
코딩사과:이런걸 할 수 있습니다. 그래서 직접 만들어보면 이렇게 되구요. 이런식으로 만드시면 되는 거구요
4:16
그러니까 이걸 쓰면 코딩애플님이랑 무료로 1:1 팬미팅을 할 수 있다는거죠?
ㅋㅋ 자기거 쓰면 고소한대 ㅋㅋ
엌ㅋㅋㅋ 선택적 1:1 팬미팅
맞긴한데 돈이 좀 많이 나가고 화가난 표정으로 오십니다
법원에서 가능하시다고 하네요~
이게 개발자 식 팬미팅이지 ㅋㅋㅋㅋ
코딩은 안할건데 이상하게 계속보게되는채널
역시 기가채드 개발자 답게 시원하게 api 까시는 모습 좋습니다
2:40 뭐야, 미카인가
미카라고 써있는데 미카인가
...??
뭐야, 미소노인가
😢
미소노 미카가 누군데 십1덕들아 ㅉㅉ
영상에서는 임베딩 원리만 다루는 것처럼 보이지만 상품 등 커스터마이즈 된 데이터를 애드온처럼 LLM에 붙여주는 생성 방식을 RAG(Retrieval Augmented Generation)라고 합니다. Langchain이나 LlamaIndex 같은 프레임워크가 이미 나와있어서 다들 한 번 보시는건 어떨까 싶네요.
w2v를 필두로 영상에 소개된 vectorization 접근 방식이 한동안 핫했죠. 되게 유용하긴 한데 이런저런 한계점도 있습니다. 예를 들어서,
- 너 참 잘 생겼다 vs 너 참 멋지다
- 너 참 잘 생겼다 vs 너 참 못 생겼다
이렇게 비교하면 뒤쪽 페어의 유사도가 더 높다고 판정해버리는 식입니다. 임베딩 자체가 기본적으로 언어의 의미보다도 문법적 구조에 영향을 많이 받는 편이라...
그래도 LLM에 쓰이는 대규모 데이터셋으로 훈련한 모델을 API 딸깍하면 쓸 수 있다는건 되게 편리하고 유용한 것 같네요.
그럼 요새는 뭐가 핫해요?? (진짜모름)
Tf프사는 믿음이지
@@user-vs9rv9uo2t word2vec은 나온지 오래된 전통적인 방법이라서.. 요즘은 transformer 모델이 대세인 것 같네요. BERT나 GPT 같은 유명한 모델들이 모두 이 기반입니다.
임베딩이 문법구조에 영향을 받던건 호랑이 담배피던 시절 얘기고 요즘은 의미를 잘 추출합니다
@@user-vs9rv9uo2t 영상에 SentenceTransformers 나오는데 이게 요즘 핫한걸까요?
불과 5년 전에는 박사님들과 싸워가면 임베디드로 유사도 거리를 구현해서 유사도 거리를 구현했었는데, 지금은 당연하다는 듯이 벡터 DB 등이 등장하는 거를 보면 발전이 빠른게 느껴지네요. 당시 논문을 쓰자고 했지만, 회사에서는 특허 내겠다고 해서 내긴 했는데, 특허는 그다지 유용하지 않았던 것은 덤...
참고 cos 거리는 각도라기보다는 다차원 벡터들간 거리 혹은 유사도에 더 가깝습니다.
요새 python으로 랭체인으로 머리 싸메고 있는데, 임베딩을 이리 사용할 생각은 못해봤네요.. ㅎㅎ
RAG도 한번 다루어 주세용.. 아니면 랭체인이나 AI관련 강의를 준비하는 것은 힘들겠죠?? ㅎㅎ
정말 간단하게 잘 설명을 해주시네요 ㅎ 좋아요!
0:16 poopupㅋㅋㅋㅋ
3:29 파일 이름이 엄베딩ㅋㅋㅋㅋ
어떻게 파일 이름이 엄베딩ㅋㅋㅋ
아직은 넘사벽인데, 너무 시원시원해서 좋네요~
RAG도입 하며 글로 정리 하려했는데 영상으로 나와버렸군요 ㅋㅋㅋ 요즘은 진짜 임베딩도 딸깍으로 되고 무료로 몽고db만써도 vector search가 기본으로 제공되어서 ㄹㅇ 딸깍 가능
영상에잇는 토큰으로 운영 환경에 추천서비스 적용했슴니다 덕분에 비용절감햇슴니다 감사합니다 개추드립니다
상남자특 : 개인API 안가림
ㅈㄴ 웃김ㅋㅋㅋㅋㅋㅋㅋㅌ
요즘 벡터임베딩이 확 떠서 저같이 프로젝트 하시는분들이 많아지고 있고요, 밥통 뺏길까봐 걱정되네요
빨리 저도 AI 여친 하나 만들어야겠네요
크으 ai 알빠메일 성공하십쇼
API키 올려놓고 쓰는 놈 고소하기! 금전 파이프라인 만들기까지 알려주는 코딩채널 미쳣다
2:38 수상할 정도로 정감이 많이 가는 개발자…
유일하게 쉴때봐도 스트레스 안받는 코딩유투버
ㅇㅈ
ㅋㅋㅋ 뭔가 동작은 하는데 왜 되는지 설명하긴 힘든 임베딩
뭔가 될거란 믿음이 필요함
일하기 싫을때 일 작게 쪼개는 방법같은거 아님 타이머 놓고 짧게 일하고 놀고 일하고 하는등 뭐 그런 팁좀 알려주세요. 일하기가 너무 싫어요 먹고는 살아야 하는데 아아아아.... Trello 에 Backlog, Todo, Ready, Doing, .... 등을 만들어놓고 todo ready doing 이 계속 늘어만가는중... ㅜㅠ
Open ai는 ai계의 프로메테우스임.... 모든걸 api로 만들어서 ai모르는 사람도 재미나게 놀게 해줌
수상할정도로 십덕 게임을 잘 아는 개발자...
(개발자가 십덕 게임을 잘 아는 것은 전혀 수상하지 않다.)
오늘 시험보는 내용 개꿀띠
근데 이거 직접 훈련시키는것도 그렇게 안힘듬 word2vec sen2vec 이런 개념이 최근에 만들어진게 아니라 11년 전부터 쭉 컨셉이 이어진거라 훈련시키는것도 라이브러리 널렸고, 모델들도 널림ㅋㅋ 리소스도 토큰들이 작다보니 그렇게 심하게 요구되지도 않고.. 한 3년전에 내 개인pc로도 했으니...
나 7살인데 저거 맞다
유사한것을 찾는게 어찌보면 어느정도 카테고리가 정해져놔 있어야 가능할거같은데요..
배운거 없는 멍청한 고3. 코딩 못하지만 계속 본다
코딩 할 시간도 없다. 그래도 본다
올리자마자 개처럼 달려왔다......
사람처럼 걷도록 하세요
@@soundsgood1746넹
짐승 그 자체
올리자마자 O(nlogn) 속도로 달려왔다
굿보이
궁금한게 임베딩 모델도 학습이나 튜닝이 가능한가요?
임베딩 이야기 할거면 엘라스틱 서치 이야기도 이어서 해주실 수 있을까요?
와 Elk cfmf 에 2년투자했는데 저는망한건가요? 내인생 automl도 구매했는데 내인생!!!
(저자는 웹팩을 전문적이게 공부하다 ㅈ된적이 있습니다 한 1년했습니다.)
오타수정은 elk 도 잘안돼서 슬펐는데 너무좋네요 ㅈ네요
7살도 이걸 한다라.... 응애!
코딩애플님 저 궁금한게 하나 있어 댓글 드립니다.. 웹 게임(html5)은 소스가 노출되어 있어 변조에 쉬울 것 같은데, 서버에서 어떤 방어로직을 통해 막는것이 획기적일까요,, 아니면 다른 툴 ? 이런 것들도 있을까요?
백엔드가 무난하긴 하죠
서버에서 이상한요청 거르기 + 계속 모니터링하는 수 밖에 없을듯요
js 난독화요... 난독화 기능중에 도메인 락 & 코드 무결성 체크 기능 있어요... 어차피 뚫는 놈들은 다 뚫겠지만... 그래도 대충 들어와서 쓱 긁어가는 놈들 1차적인 방어는 가능합니다.
input에 한글 보내면 400에러 나는데 한글은 변환해줘야하나요 ?
ㅋㅋㅋㅋㅋㅋㅋㅋㅋ아니 이렇게 행복하게 API키 오픈해두실줄은ㅋㅋㅋㅋㅋ
코딩애플님 보여주신 키 값 Incorrect API key라고 나옵니다.
2:40 나작스게임이던가 그거 생각난다
5:23 건고한 명품 독일 침대
02:47 우리 같은 사람들은 여자랑 카톡을 할 기회가 없기 때문에 이런거 굉장히 만족스럽구요
_(:3 」∠ )_
4:16 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ
항상 정말 유용해요 ㅎㅎ 감사합니다!
개인api키만 기억에 남네
벡터로 유사도 검색하면 속도가 느려진다거나 하는 단점은 없나요?
안녕하세요 7살입니다. 덕분에 쌈@뽕한 웹사이트를 만들었습니다. 감사합니다.
이제 임베딩까지 수면으로 오는군요. 넘 좋네요
헐벌레떡 달왔려니습다~~~~~❤
코딩애플님 api key맛있네요
그러니까 요즘 관심 있는게 2:37 라는거죠?
놀랄일도 아닌게 중학생이 불법 도박 사이트 총책으로 프로그램 만들고 운영까지 하면서 고등학생, 대학생들로 파트타임으로 고용하던데... (며칠 전 뉴스 기사) 7세는 뭐 저정돈 하는게 대한민국이지ㅋ 잘 봤어요❤
ㅋㅋ 그런거 다 직접만드는거아님
2:47 스플뎀 무엇😢
썸네일 보자마자 vanilla JS 처럼 달려왔습니다
코딩 전문가 쩔템같네
요즘 7살들은 정말 미쳣구나..
이 사람 재밌네
개신기해요
와 유익한 영상이에요!
개인API가 뭐에요?? 대충 아이디비번을 유튜브에 올렸다고 생각하면 될까요..
감사합니다👍
허, 더 이상 개발자들이 많이 필요가 없네
이거 왜 봤던거같지? 고딩때 봤는데 지금 군대에서 보고있네 ㅋㅋㅋㅋ
상남자특: 자기 API Key 온라인에 공개함
형 니케 열심히하는구나...
근데 키값 쌩으로 보여주는건 너무 상남자식이 아닌지 ㄷ....
@@user-rk3lr3xg8zWls
바로 달려왔다
떠먹여주는 애플
형 지금 웹사이트 다운됬어. 코딩애플 교육 사이트 에러 생겼는데 수강이 안됨
4:13 토큰 잘 쓸게요 ^^
헉!!!!!!
상남자 ㄷ ㄷ ㄷ
최고다 애플형🫣
이 영상을 보고 카톡 999++ 쌓고사는 알파메일 됐습니다 감사합니다
만드는건 쉬운데 저거 호스팅 할려면 돈 많이 들듯
요즘 7살들 똑똑하네요
2:14 방향이 같아도 멀리 떨어진 단어면 어떡하죠?
코사인 유사도는 거리 그런거 관련 없습니다
방향 사이의 각도만 판단해요
@@user-wv1sl3ln2f 코사인 유사도가 높아도 거리가 먼 단어면 어떻게 되냐는 질문 아님?!
@@TheAwaofficial 맞긴 한데요, 코사인 유사도는 두 벡터 사이의 거리와 정말로 아무런 관련이 없습니다.
쉽게 설명하자면 코사인 유사도를 계산하는 과정에는 두 벡터의 크기를 1로 만드는, 다시 말해 벡터가 반지름의 길이가 1인 원 위에 놓이도록 하는 과정이 포함되기 때문이라고 보시면 됩니다.
요즘은 딸깍을 잘해야한다
작년에 논문 뒤져가면서 보던 임베딩 오랜만에 보넹 ㅋㅋㅋㅋㅋㅋㅋㅋ
진지하게 보다가 ㅋㅋㅋ 개터졌네
사장님~ 여기 장고는 없어요?
사이트에 10초 회원가입이라고 나와 스탑워치로 재봤는데 23초나 걸렸습니다 23초 회원가입 버튼으로 변경해 주세요
코딩애플 홈페이지가 로그인이 접속이 안됩니다...
벡터 디비 사랑해요
누가gpt랑 메일이랑 엮어서 아이마스 하루카랑 메일주고받는다고하던데
굿
👍
아ㅋㅋㅋ 코딩애플보고 개처럼 튀어왔네 ㅋㅋㅋ
그러니까 코딩구애푸르님은 여고생이 꿈인 지휘관인거구나!
알파메일의 삶 ㅋㅋㅋㅋㅋㅋ
03:04 유저가 채팅 자유롭게 입력하고 여자애가 대답하는 채팅겜 이미 몇개 있는걸로 암다...
제가 했던건 tonafure(전연령)himifure(성인판)였는데 한참동안 안들어가다
오랜만에 영상보고 생각나서 들어가보니 벌써 릴리스 기념 500일 이벤트하네여...
임베딩 값이 비슷한 질문과 답변 예시입니다
2:50
"무슨일이야 애드미?"
- "니애미"
지금 사이트 로그인 되나요?
저만 안되는건지...!
저도 안돼요...
3b1b 딥러닝 ㄱㄱ
7살 기준이 너무 높아요
품번에도 유사도가 나올라나?
Api키 ㅋㅋㅋㅋㅋㅋㅋㅋ 뭐야 ㅋㅋㅋㅋㅋㅋ
안녕하세요. 저는 6살입니다.
추천 서비스 쓸모 없어서 절대 안씀
오늘 영상 내용: 국민 api 뿌립니다
🎉❤