Parameter-Efficient Mixture-of-Experts Architecture for Pre-trained Language Models The state-of-the-art Mixture-of-Experts (short as MoE) architecture has achieved several remarkable successes in terms of increasing model capacity. However, MoE has been hindered widespread adoption due to complexity, communication costs, and training instability. Here we present a novel MoE architecture based o..

2022년 3월 7일 9시 오늘의 이슈입니다 ☺️이근 대위, 신사와 아가씨, 민간인 대피 또 무산, 기상청 사람들, 스물다섯 스물하나, 울진 삼척 산불, 신현준 아내, 김만배 박영수 사건해결, 보령 해저터널, 또 김정은 완벽통제 엄청나게 이근 대위 • 이근 대위, 우크라로 출국…"살아 돌아간다면 처벌 받겠다" • 이근 대위 "우크라 돕기 위해 출국…살아 돌아오면 처벌받겠다" • 이근 "우크라이나 의용군 참전...대한민국 위상 높일 것"(종합) • “우크라 돕자” 외국인 의용군 2만명…이근 대위도 갔다 • “러시아와 싸우겠다”…이근, 팀 꾸려 우크라이나 갔다 • “러와 싸우겠다” 이근 전 대위, 우크라행…정의감일까 만용일까 • 이근, 우크라로 출국 "살아 돌아오면 처벌 받을 것" • "살아 돌아온다면 처벌..

https://codlingual.tistory.com/253 Hacktoberfest 2021 핵토버 페스트 2021 참여하기 https://hacktoberfest.digitalocean.com/ Hacktoberfest '21 Open source is changing the world – one contribution at a time. hacktoberfest.digitalocean.com 나의 소중한 스터디 메이트님이 알려주신 핵토.. codlingual.tistory.com 작년에 오픈소스에 기여하는 핵토버 페스트에 참여했다. 4개의 PR이 merge되면 티셔츠 주는 거였다! 핵토버 페스트 덕분에 처음으로 모르는 사람 repo에 PR도 날려보고~ huggingface 리드미도 내가 번역함!!..

Large-Scale Hate Speech Detection with Cross-Domain Transfer The performance of hate speech detection models relies on the datasets on which the models are trained. Existing datasets are mostly prepared with a limited number of instances or hate domains that define hate topics. This hinders large-scale analysis and transfer learning with respect to hate domains. In this study, we construct large..

2022년 3월 4일 9시 오늘의 이슈입니다 ☺️대선 사전투표 시작, 최철호 음주 난동, 안철수, 서른 아홉, 손실보상금, 유류세 7월말까지 검토, 제대로 못 먹고 여아 숨져 20대, 주접이 풍년 김호중, 세계태권도 러시아 벨라루스, 전국 중부 미세먼지 나쁨 대선 사전투표 시작 • 20대 대선 사전투표 첫날...전국 어디서나 투표 가능 • [속보] 文대통령 내외, 사전투표 완료…"민주공화국 주권자" • 오늘부터 사전투표 시작…최고 투표율 전망 • 20대 대선 사전투표 시작…확진자 · 격리자는 내일 투표 • 대선 사전투표 광주·전남서 시작…394곳 투표소서 이틀간 실시 • 20대 대선 사전투표 첫날…전국서 오전 6시 일제히 투표 시작 • [사전투표] 코로나 대선…투표소 방역소독 • 대선 사전투표율 오전 8..

2022년 3월 3일 17시 오늘의 이슈입니다 ☺️尹 安 단일화, 오세훈 그대로 부동산 없을 것, 김총리 PCR 검사, 음주 난동 최철호, 코로나 19 인후통, 뚜밥, 이승효, 낙태약 아기 20대, 거리두기 ·12시 완화하나, 피오 코로나 확진 尹 安 단일화 • 尹·安, 후보 단일화 선언 "공동정부 구성…선거 뒤 합당"(종합) • 우상호 "尹·安 단일화, 자리 나눠먹기 야합…심판해달라" • 이재명, 尹-安 단일화에 “국민 믿어…꿋꿋하게 가겠다” • [일문일답] 尹-安 전격 단일화 왜? "정권교체 대의에 함께" • 유시민 "尹-安 단일화, 표 일대일로 쪼개져 효과 없을 듯" • 송영길, 尹·安 단일화에 "더욱 더 승리 확신 들어" • [단독] '편맥' 짠 하자 분위기 풀렸다…尹·安 단일화 막전막후 • 양자..