Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
Tags
- MySQL
- t분포
- 코딩테스트
- 카이제곱분포
- GRU
- inner join
- update
- NLP
- 서브쿼리
- leetcode
- sql
- CASE
- 논문리뷰
- torch
- LSTM
- sigmoid
- SQL 날짜 데이터
- 자연어 논문
- SQL코테
- 자연어 논문 리뷰
- airflow
- Window Function
- Statistics
- 설명의무
- HackerRank
- 그룹바이
- 표준편차
- 짝수
- 자연어처리
- nlp논문
Archives
- Today
- Total
목록ALBERT: A Lite BERT for Self-supervised Learning of Language Representations (1)
HAZEL
![](http://i1.daumcdn.net/thumb/C150x150.fwebp.q85/?fname=https://blog.kakaocdn.net/dn/cNMGOU/btq4rH9YidL/40rjsz9JFgNIHv8IsDCeR0/img.png)
NLP 논문 스터디에서 발표한 내용으로, PPT만 있는 글 입니다. - 추후에 설명 글도 첨가할 예정 ** arxiv.org/abs/1909.11942 ALBERT: A Lite BERT for Self-supervised Learning of Language Representations Increasing model size when pretraining natural language representations often results in improved performance on downstream tasks. However, at some point further model increases become harder due to GPU/TPU memory limitations and longer..
DATA ANALYSIS/Paper
2021. 5. 9. 11:02