Skip to content

Commit

Permalink
Merge branch 'google:master' into master
Browse files Browse the repository at this point in the history
  • Loading branch information
shitamo authored Jul 24, 2024
2 parents 8502e2f + 7faa01e commit 050a0ed
Show file tree
Hide file tree
Showing 4 changed files with 97 additions and 0 deletions.
5 changes: 5 additions & 0 deletions src/data/dictionary_manual/places.tsv
Original file line number Diff line number Diff line change
Expand Up @@ -5,6 +5,7 @@
うとろ 宇登呂 地名
うらしべつ 浦士別 地名
えとんびやま 江鳶山 地名
えんけい 燕京 地名
おんねない 音根内 地名
おんねべつ 遠音別 地名
かっくみ 活汲 地名
Expand All @@ -15,5 +16,9 @@
たちあらい 太刀洗 地名
ちえんべつ 知円別 地名
とっぷし 富武士 地名
とどがさき 魹ヶ崎 地名
ねぶたに 掖谷 地名
ひかりの ひかり野 地名
みどり 美禽 地名
みぬめ 敏馬 地名
みるめ 敏馬 地名
18 changes: 18 additions & 0 deletions src/data/dictionary_manual/words.tsv
Original file line number Diff line number Diff line change
@@ -1,8 +1,11 @@
# key value pos
あいしんかくら 愛新覚羅
あおぞらぎんこう あおぞら銀行 固有名詞
あさごはん 朝ごはん 名詞
あさごはん 朝ご飯 名詞
いけいざい 違警罪 名詞
いっきょうたじゃく 一強他弱 名詞
いんきゃ 陰キャ 名詞
うっぷんばらし 鬱憤晴らし 名詞サ変
うらめん 裏面 名詞
えいえいじてん 英英辞典 名詞
Expand All @@ -13,16 +16,23 @@
かくしゃ 覚者 名詞
かねのなるき 金のなる木 名詞
からだき 空焚き 名詞サ変
かんじ 巻次 名詞
かんじょうば 勘定場 名詞
かんりめいがら 監理銘柄 名詞
きそう 寄贈 名詞サ変
きったん 契丹 固有名詞
きゅうせいこうこう 旧制高校 名詞
きんとれ 筋トレ 名詞サ変
くうしゅうごう 空集合 名詞
くわたけいすけ 桑田佳祐 人名
けいらんし 鶏卵紙 名詞
けっていこう 決定稿 名詞
げんしきょうさんしゅぎ 原始共産主義 名詞
こういしつ 更衣室 名詞
こうこう 礦坑 名詞
こうじょ 扣除 名詞サ変
こうばいりょくへいか 購買力平価 名詞
こうはんいんさつ 孔版印刷 名詞サ変
こきゅう 枯朽 名詞
こんせ 今世 名詞
こんぜ 今世 名詞
Expand All @@ -35,13 +45,15 @@
ししゅう 歯周 名詞
しっちゃく 失着 名詞サ変
じってんぽ 実店舗 名詞
しゃしんしょくじ 写真植字 名詞サ変
しゅうせいこう 修正稿 名詞
じょういごかんせい 上位互換性 名詞
しんしょかいふうざい 信書開封罪 名詞
せいりめいがら 整理銘柄 名詞
ぜんざいさん 全財産 名詞
そうけつ 倉頡 人名
そうけつ 蒼頡 人名
そきゃく 阻却 名詞サ変
そっかん 速乾 名詞サ変
たいしょうがい 対象外 名詞
たいしょうない 対象内 名詞
Expand All @@ -61,6 +73,8 @@
にようそにんしょう 二要素認証 名詞サ変
はいたしょり 排他処理 名詞サ変
ばうんしゃ 馬運車 名詞
はきいん 破毀院 名詞
はんき 搬器 名詞
ひともうけ 一儲け 名詞サ変
ひゃっきん 百均 名詞
ひらぶん 平文 名詞
Expand All @@ -70,14 +84,18 @@
ほじょう 圃場 名詞
ほっけ 𩸽 名詞
ほんじ 翻字 名詞サ変
みぬめじんじゃ 敏馬神社 固有名詞
みるめじんじゃ 敏馬神社 固有名詞
むえき 無益 名詞形動
むびゅう 無謬 名詞
むびゅうせい 無謬性 名詞
むやく 無役 名詞形動
もどりち 戻り値 名詞
やくたたず 役立たず 名詞形動
ゆうちょぎんこう ゆうちょ銀行 固有名詞
らのべ ラノベ 名詞
りねーむ リネーム 名詞サ変
りまいんど リマインド 名詞サ変
りゅうこうごたいしょう 流行語大賞 名詞
れいわ 令和 固有名詞
わいろざい 賄賂罪 名詞
37 changes: 37 additions & 0 deletions src/data/dictionary_oss/evaluation.tsv
Original file line number Diff line number Diff line change
Expand Up @@ -311,6 +311,43 @@ FAILED: じっぽん 十本 Conversion Expected 99 日本 2.30.5490
OK: いりなか 杁中 Conversion Expected 9 杁中 2.30.5490
FAILED: けんし 剣士 Conversion Expected 999 玄師 2.30.5490
OK: よねずけんし 米津玄師 Conversion Expected 米津玄師 2.30.5490
OK: そきゃく 阻却 Conversion Expected 99 阻却 2.30.5520
FAILED: そきゃく 阻却 Conversion Expected 999 阻卻 2.30.5520
OK: いほうせいがそきゃくされる 違法性が阻却される Conversion Expected 違法性が阻却される 2.30.5520
FAILED: かいほう 開放 Conversion Expected 99 開封 2.30.5520
OK: いんきゃ インキャ Conversion Expected 9 陰キャ 2.30.5520
OK: あおぞらぎんこう あおぞら銀行 Conversion Expected あおぞら銀行 2.30.5520
FAILED: ゆうちょぎんこう 郵貯銀行 Conversion Expected ゆうちょ銀行 2.30.5520
OK: えんけい 円形 Conversion Expected 99 燕京 2.30.5520
OK: きったん 切ったん Conversion Expected 99 契丹 2.30.5520
OK: はきいん 破毀院 Conversion Expected 99 破毀院 2.30.5520
OK: わいろざい 賄賂罪 Conversion Expected 9 賄賂罪 2.30.5520
OK: いけいざい 違警罪 Conversion Expected 9 違警罪 2.30.5520
OK: こうこう 高校 Conversion Expected 99 礦坑 2.30.5520
FAILED: こうこう 高校 Conversion Expected 99 砿坑 2.30.5520
FAILED: べんり 便利 Conversion Expected 99 辨理 2.30.5520
FAILED: ごうべん 合弁 Conversion Expected 99 合辦 2.30.5520
FAILED: とうししんたくこうざをかいせつ 投資信託口座を解説 Conversion Expected 投資信託口座を開設 2.30.5520
FAILED: でーたをせっしゅする データを接種する Conversion Expected データを窃取する 2.30.5520
OK: きゅうせいこうこう 旧制高校 Conversion Expected 9 旧制高校 2.30.5520
OK: ぶんがくし 文学し Conversion Expected 2 文学士 2.30.5520
FAILED: せつぞく 接続 Conversion Expected 999 接續 2.30.5520
OK: かんじ 感じ Conversion Expected 99 巻次 2.30.5520
OK: はんき 半期 Conversion Expected 9 搬器 2.30.5520
OK: げんしきょうさんしゅぎ 原始共産主義 Conversion Expected 原始共産主義 2.30.5520
OK: こうはんいんさつ 孔版印刷 Conversion Expected 9 孔版印刷 2.30.5520
OK: しゃしんしょくじ 写真食事 Conversion Expected 9 写真植字 2.30.5520
OK: けいらんし 鶏卵紙 Conversion Expected 9 鶏卵紙 2.30.5520
OK: とどがさき 魹ヶ崎 Conversion Expected 9 魹ヶ崎 2.30.5520
FAILED: くぬぎ クヌギ Conversion Expected 99 2.30.5520
OK: ねぶたに ねぶたに Conversion Expected 9 掖谷 2.30.5520
FAILED: ねぶたに ねぶたに Conversion Expected 999 棭谷 2.30.5520
FAILED: ねぶ ねぶ Conversion Expected 999 2.30.5520
FAILED: ねぶ ねぶ Conversion Expected 999 2.30.5520
OK: みぬめ 敏馬 Conversion Expected 9 敏馬 2.30.5520
OK: みぬめじんじゃ 敏馬神社 Conversion Expected 9 敏馬神社 2.30.5520
FAILED: みるめ 見る目 Conversion Expected 9 敏馬 2.30.5520
OK: みるめじんじゃ 敏馬神社 Conversion Expected 9 敏馬神社 2.30.5520
OK: たしました 足しました Conversion Expected 足しました 2.26.4695
OK: こじんよう 個人用 Conversion Expected 個人用 2.26.4695
OK: からめて 絡めて Conversion Expected 絡めて 2.26.4695
Expand Down
37 changes: 37 additions & 0 deletions src/data/test/quality_regression_test/oss.tsv
Original file line number Diff line number Diff line change
Expand Up @@ -311,3 +311,40 @@ oss_issue960 じっぽん 日本 Conversion Expected 99
oss_issue961 いりなか 杁中 Conversion Expected 9
oss_issue962 けんし 玄師 Conversion Expected 999
oss_issue962 よねずけんし 米津玄師 Conversion Expected
oss_issue965 そきゃく 阻却 Conversion Expected 99
oss_issue965 そきゃく 阻卻 Conversion Expected 999
oss_issue966 いほうせいがそきゃくされる 違法性が阻却される Conversion Expected
oss_issue967 かいほう 開封 Conversion Expected 99
oss_issue968 いんきゃ 陰キャ Conversion Expected 9
oss_issue969 あおぞらぎんこう あおぞら銀行 Conversion Expected
oss_issue970 ゆうちょぎんこう ゆうちょ銀行 Conversion Expected
oss_issue971 えんけい 燕京 Conversion Expected 99
oss_issue972 きったん 契丹 Conversion Expected 99
oss_issue974 はきいん 破毀院 Conversion Expected 99
oss_issue975 わいろざい 賄賂罪 Conversion Expected 9
oss_issue976 いけいざい 違警罪 Conversion Expected 9
oss_issue977 こうこう 礦坑 Conversion Expected 99
oss_issue977 こうこう 砿坑 Conversion Expected 99
oss_issue978 べんり 辨理 Conversion Expected 99
oss_issue979 ごうべん 合辦 Conversion Expected 99
oss_issue981 とうししんたくこうざをかいせつ 投資信託口座を開設 Conversion Expected
oss_issue982 でーたをせっしゅする データを窃取する Conversion Expected
oss_issue983 きゅうせいこうこう 旧制高校 Conversion Expected 9
oss_issue984 ぶんがくし 文学士 Conversion Expected 2
oss_issue985 せつぞく 接續 Conversion Expected 999
oss_issue986 かんじ 巻次 Conversion Expected 99
oss_issue987 はんき 搬器 Conversion Expected 9
oss_issue988 げんしきょうさんしゅぎ 原始共産主義 Conversion Expected
oss_issue989 こうはんいんさつ 孔版印刷 Conversion Expected 9
oss_issue990 しゃしんしょくじ 写真植字 Conversion Expected 9
oss_issue991 けいらんし 鶏卵紙 Conversion Expected 9
oss_issue992 とどがさき 魹ヶ崎 Conversion Expected 9
oss_issue993 くぬぎ Conversion Expected 99
oss_issue994 ねぶたに 掖谷 Conversion Expected 9
oss_issue994 ねぶたに 棭谷 Conversion Expected 999
oss_issue995 ねぶ Conversion Expected 999
oss_issue995 ねぶ Conversion Expected 999
oss_issue996 みぬめ 敏馬 Conversion Expected 9
oss_issue996 みぬめじんじゃ 敏馬神社 Conversion Expected 9
oss_issue996 みるめ 敏馬 Conversion Expected 9
oss_issue996 みるめじんじゃ 敏馬神社 Conversion Expected 9

0 comments on commit 050a0ed

Please sign in to comment.