Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
Tags
- HackerRank
- sql
- SQL 날짜 데이터
- CASE
- 코딩테스트
- inner join
- torch
- Statistics
- nlp논문
- 짝수
- 표준편차
- sigmoid
- leetcode
- 자연어 논문 리뷰
- 설명의무
- LSTM
- t분포
- 그룹바이
- 자연어처리
- 논문리뷰
- Window Function
- GRU
- update
- 서브쿼리
- SQL코테
- 자연어 논문
- airflow
- MySQL
- 카이제곱분포
- NLP
Archives
- Today
- Total
목록ALBERT: A Lite BERT for Self-supervised Learning of Language Representations (1)
HAZEL
![](http://i1.daumcdn.net/thumb/C150x150.fwebp.q85/?fname=https://blog.kakaocdn.net/dn/cNMGOU/btq4rH9YidL/40rjsz9JFgNIHv8IsDCeR0/img.png)
NLP 논문 스터디에서 발표한 내용으로, PPT만 있는 글 입니다. - 추후에 설명 글도 첨가할 예정 ** arxiv.org/abs/1909.11942 ALBERT: A Lite BERT for Self-supervised Learning of Language Representations Increasing model size when pretraining natural language representations often results in improved performance on downstream tasks. However, at some point further model increases become harder due to GPU/TPU memory limitations and longer..
DATA ANALYSIS/Paper
2021. 5. 9. 11:02