Data & ML
"Data & ML" 카테고리의 모든 글
Machine learning, data work, and applied AI foundations.
- Data & ML
HalluLens 논문리뷰
기존의 데이터 리키지가 걱정되는 할루시네이션 벤치마크는 저리가라!
- Data & ML
batch vs batch size
데이터 Sample 묶음batch 1 묶음에 들어가는 sample의 개수
- Data & ML
임베딩과 tokenize개념
sequence(text, frame으로 나뉘어진 f0음성등)을 token으로 나눠서 수치화한것, 인덱싱으로 매핑한것token들에 대해서 의미적인 연관성을 기반으로 배치한것
- Data & ML
텐서 조작 팁 - unsqueeze는 뭐냐?
unsqueeze는 PyTorch에서 텐서에 새로운 차원(길이 1인 축)을 추가하는 함수입니다.예를 들어, quantized_f0의 shape이 (1703,)라면, quantized_f0.unsq
- Data & ML
nn.Embedding이란
동기\n내가 아는 embedding의 개념은 자연어 혹은 entity들을 사용자가 원하는 의미적 유사도대로 임베딩 space에 수치화 해서 배치하는것으로 알고 있다.\n\n근데 자연어인 lyrics를 바로 nn.Embedding에 통과 시키는것이 아닌 Lyrics가 이미 v
- Data & ML
왜 nn.Embedding을 하면 transpose를 하는걸까?
lyrics encoder과 melodyU encoder를 Summation한 뒤의 shape는 (1, 192, 1) - (b, h, time(seq_len))이다. 요녀석들은 enhanced condition encoder에서 다시 FFT 연산을 하는데 동일하게 nn
- Data & ML
Mean pooling - 임베딩 차원 맞춰보자이
\n문제\nLyrics와 quantized f0된 melody를 FFT encoding을 하면 [batch size, hidden channel, time(seq_len)-> 시퀀스 Length]가 나온다.\nsequence length가 다를 수도 있지 않누??\n\n해결\nm
- Data & ML
k-fold cross validation에 대해서 Overfitting 되는것
하이퍼 파라미터 튜닝 cv 과적합
- Data & ML
Outlier 판별법
https://esj205.oopy.io/72782730-23e4-43cf-8799-f3cdcbcb57b9
- Data & ML
사분위수란? (박스 그래프란?)
흰수염 그래프
- Data & ML
multilabel-classification finetuning
실험 설계evaluation metric macro
- Data & ML
RAGchain Benchmark 3줄정리
benchmark 간단정리
- Data & ML
Context length가 무엇인가?
LLM이 한번에 처리할 수 있는 토큰수이다. llm에 input sequence에 최대 길이이다.네이스한 설명이것이 중요한 이유는1.모델이 article들을 summarize 하는데에 context length를 넘을 수 없다.2.Long-term planning ta
- Data & ML
Qrels란
쿼박사님을 아세유?
- Data & ML
RAGchain benchmark Mr.tydi
타이디 아저씨를 아세유?
- Data & ML
MRR metric
MRR이 무엇인가?(mean reciprocal rank)
- Data & ML
RAGchain 용어사전
논문보다가 모르는 단어들이 난무해서 내가 보려고 정리해놓는곳이다.
- Data & ML
Blending
맛있는 커피 블랜딩 넷플릭스 예측대회 1등 알고리즘이라는데??
- Data & ML
하이퍼 파라미터
https://rosypark.tistory.com/236
- Data & ML
PCA(Principle Component Analysis)
pca가 뭐야?
- Data & ML
Overfitting & Underfitting
오버피팅이 뭐야?
- Data & ML
Supervised Learning(Classification)
Classification을 알아봅시다
- Data & ML
Supervised Learning(Regression)
Regression에 대해서 알아봅시다.
- Data & ML
Data preprocessing
데이터 전처리 과정
- Data & ML
자료의 형태
군 ai/sw 역량강화 프로그램 참여