株式会社Laboro.AIは、本年4月に公開した当社オリジナル日本語版BERTモデルに蒸留を施し軽量・高速化を図った『 Laboro DistilBERT 』を開発し、非商用途に無償公開いたしました。 ＜今回のポイント＞ ︎本年4月に公開した当社BERTモデルをさらに軽量・高速化 ...

今進めている論文執筆がひと段落しました．今進めている卒業論文は予想以上に早く進んだため，日本語で書いた後に英訳し，英語版をarXivに載せてみてはどうだと教授から提案がありました． そんな訳で，英語版の論文を書くことを最終目標に ...

Large language models (LLMs) have emerged as powerful tools for generating human-quality text, raising concerns about their potential for misuse in academic settings. This paper investigates the use ...

Abstract: Deep learning has revolutionized natural language processing by enabling complex models to classify text. This paper investigates using DistilBERT, a pre-trained transformer model, to ...

La única diferencia entre configuraciones es la estrategia de congelamiento y la cabeza — el backbone, los datasets, los hiperparámetros y la métrica de evaluación son idénticos en todas. Finalmente, ...

Sentiment analysis is a natural language processing (NLP) task that involves determining the sentiment or emotion expressed in a piece of text. In this project, we use the DistilBERT model to classify ...

Abstract: The rapid spread of false information on social media has become a major challenge in today’s digital world. This has created a need for an effective rumor detection system that can identify ...