{
dropout
}
{
SimCSE
}
(2)
{
教師なしSimCSE
K#
EDD2/8F2A
}
t_w 「プロモーションを含みます」
dropoutを使う
(2)
{
あれ
}
{
あれ
}
(2)
{
あれ
}
{
ALBERT
}
{
教師なしSimCSE
}
(3)
{
あれ
K#
EDD2/0709
}
t_w 「プロモーションを含みます」
追加で
ALBERT
を
教師なしSimCSE
で学習してみている。
{
教師ありSimCSE
}
{
ALBERT
}
{
教師なしSimCSE
}
{
Sentence Embedding
}
(4)
{
あれ
K#
EDD2/B5EA
}
t_w 「プロモーションを含みます」
そういうわけで、
ALBERT
を
教師なしSimCSE
の後に
教師ありSimCSE
で学習したところ、ここまで学習できた。
(1)
{
あれ
}
{
教師なしSimCSE
}
{
}