NLP(Natural Language Processing:自然言語処理)におけるコンピュテーション量の増大。Megatron-LMとT-NLGでさらに跳ね上がっている。メガトロンは、トランスフォーマ(アニメ、コミック、映画、玩具)に登場する最大サイズの機械生命体「Megatron-LM_Training Multi-Billion Parameter Language Models Using Model Parallelism」(R. Puri, et al., GTC 2020)

NLP(Natural Language Processing:自然言語処理)におけるコンピュテーション量の増大。Megatron-LMとT-NLGでさらに跳ね上がっている。メガトロンは、トランスフォーマ(アニメ、コミック、映画、玩具)に登場する最大サイズの機械生命体「Megatron-LM_Training Multi-Billion Parameter Language Models Using Model Parallelism」(R. Puri, et al., GTC 2020)