初始提交

This commit is contained in:
dohliam committed 2020-11-08 17:52:32 -08:00
commit 2367320c75
9 files changed
+16133

No files matched your search

+16
View File
@@ -0,0 +1,16 @@
本倉庫採用創作共用“署名 3.0”許可協議授權。
你可自由:
分享 — 以任何媒介或格式重製及散布本素材
修改 — 重混、轉換本素材、及依本素材建立新素材
且為任何目的,包含商業性質之使用。
只要你遵守授權條款規定,授權人不能撤回你使用本素材的自由。
惟需遵照下列條件:
姓名標示 — 你必須給予 適當表彰、提供指向本授權條款的連結,以及 指出(本作品的原始版本)是否已被變更。你可以任何合理方式為前述表彰,但不得以任何方式暗示授權人為你或你的使用方式背書。
不得增加額外限制 — 你不能增設法律條款或科技措施,來限制別人依授權條款本已許可的作為。
http://creativecommons.org/licenses/by/3.0/deed.zh_TW
+64
View File
@@ -0,0 +1,64 @@
# 繁簡體字轉換表
## 說明
本倉庫的兩個轉換表根據[開放詞典網](http://kaifangcidian.com/)數據,對照繁簡體漢字,以便於提供實時轉換等功能。2009年起,[開放漢語詞典](http://kaifangcidian.com/han/han)便應用這兩個對照表以提供詞條繁簡版本,一直沿用至今。
值得注意的是,這是一個字形轉換表,而不是一個本地化工具。相對於其他繁簡轉換工具,本項目採用“簡單”(或“愚能”)轉換而非“智能”轉換為原則,僅轉字符而不轉地域用詞,例如繁體/正體的“**電腦**”一詞簡化的結果是“电脑”而非“计算机”,而“**数据库**”轉成繁體字則是“數據庫”而不是“資料庫”,因為原則上一個決定採用簡體或繁體漢字來書寫文章的作者是可能住在世界任何地區,也可能有任何文化背景和寫法習慣,包括用繁體字寫出“大陸用詞”或者用簡體字寫出“港台用詞”,因此應儘量尊重作者的意願,純粹對個別字符所屬的字形進行轉換。
以上介紹的轉換方式最大優點包括輕量、快速、方便、簡潔,可以有效嵌入多個應用環境。當然亦有缺點,如簡繁轉換中眾所週知的“[一對多](https://github.com/kfcd/yiduiduo)”問題和語法解析問題,例如“**發**”和“**髮**”的簡化字皆為“**发**”,必須視乎語文場合和作者背景知識來決定簡化字在該詞中的含義,而無法自動進行判斷。又或者像“**于经理**”,“**于老师**”中的“**于**”字可能是介詞“於”,也可能是于姓的“于”字,因為涉及到語法和句子的機器分析,這類難點並非一般“智能轉換”工具所能解決的問題。既然如此,我們就得假設進行簡繁轉換是不得不加以人為校對覈實才能算可靠。
## 數據格式
### 轉換表
主目錄裡的兩個文本文件分別為繁體至簡體和簡體至繁體的轉換表,以製表符分隔。
* `fanjian.txt` (繁=>簡)
* `jianfan.txt` (簡=>繁)
每組詞以換行符(`\n`)分割
單個詞以製表符(`\t`)分割
### Sed 腳本
在`sed`文件夾裡面有兩個sed腳本:
* `fanjian.sed` (繁=>簡)
* `jianfan.sed` (簡=>繁)
運行方式很簡單:
* 轉換字符串:`echo "转换" | sed -f jianfan.sed`(結果:`"轉換"`)
* 轉換文本文件:`sed -f jianfan.sed text.txt > convert.txt`
### JSON
在文件夾 `dist/json` 裡有兩個文檔 `fanjian.json` 和 `jianfan.json`,分別為繁轉簡和簡轉繁的JSON格式字串。
## 腳本
`rb`文件夾裡有一個小生成腳本 `shengcheng.rb`,可以用 Ruby 運行如下:
ruby shengcheng.rb
以上命令會按照 `fanjian.txt` 和 `jianfan.txt` 的內容在 `dist` 下的子目錄裡自動生成 sed, JSON 等格式的輸出文件。
## 實現示例
* Sed
* Ruby
* JavaScript
## 另見
* [漢字簡繁轉換一對多字表](https://github.com/kfcd/yiduiduo)
* [開放中文轉換](https://github.com/BYVoid/OpenCC) - 智能中文繁簡轉換
## 版權
© 2015 [開放詞典](http://www.kaifangcidian.com)
本表依照創作共用(創用CC/知識共享)姓名標示(署名)協議發佈。
<a rel="license" href="http://creativecommons.org/licenses/by/3.0/"><img alt="創用 CC 授權條款" style="border-width:0" src="https://i.creativecommons.org/l/by/3.0/88x31.png" /></a><br />本著作係採用<a rel="license" href="http://creativecommons.org/licenses/by/3.0/">創用 CC 姓名標示 3.0 未本地化 授權條款</a>授權.
+1
View File
@@ -0,0 +1 @@
[{"i":"丟","o":"丢"},{"i":"並","o":"并"},{"i":"乾","o":"干"},{"i":"亂","o":"乱"},{"i":"亙","o":"亘"},{"i":"亞","o":"亚"},{"i":"佇","o":"伫"},{"i":"佈","o":"布"},{"i":"余","o":"馀"},{"i":"併","o":"并"},{"i":"來","o":"来"},{"i":"侖","o":"仑"},{"i":"侶","o":"侣"},{"i":"俁","o":"俣"},{"i":"係","o":"系"},{"i":"俔","o":"伣"},{"i":"俠","o":"侠"},{"i":"倀","o":"伥"},{"i":"倆","o":"俩"},{"i":"倈","o":"俫"},{"i":"倉","o":"仓"},{"i":"個","o":"个"},{"i":"們","o":"们"},{"i":"倫","o":"伦"},{"i":"偉","o":"伟"},{"i":"側","o":"侧"},{"i":"偵","o":"侦"},{"i":"偽","o":"伪"},{"i":"傑","o":"杰"},{"i":"傖","o":"伧"},{"i":"傘","o":"伞"},{"i":"備","o":"备"},{"i":"傢","o":"家"},{"i":"傭","o":"佣"},{"i":"傯","o":"偬"},{"i":"傳","o":"传"},{"i":"傴","o":"伛"},{"i":"債","o":"债"},{"i":"傷","o":"伤"},{"i":"傾","o":"倾"},{"i":"僂","o":"偻"},{"i":"僅","o":"仅"},{"i":"僉","o":"佥"},{"i":"僑","o":"侨"},{"i":"僕","o":"仆"},{"i":"僞","o":"伪"},{"i":"僥","o":"侥"},{"i":"僨","o":"偾"},{"i":"價","o":"价"},{"i":"儀","o":"仪"},{"i":"儂","o":"侬"},{"i":"億","o":"亿"},{"i":"儈","o":"侩"},{"i":"儉","o":"俭"},{"i":"儐","o":"傧"},{"i":"儔","o":"俦"},{"i":"儕","o":"侪"},{"i":"儘","o":"尽"},{"i":"償","o":"偿"},{"i":"優","o":"优"},{"i":"儲","o":"储"},{"i":"儷","o":"俪"},{"i":"儺","o":"傩"},{"i":"儻","o":"傥"},{"i":"儼","o":"俨"},{"i":"兇","o":"凶"},{"i":"兌","o":"兑"},{"i":"兒","o":"儿"},{"i":"兗","o":"兖"},{"i":"內","o":"内"},{"i":"兩","o":"两"},{"i":"冊","o":"册"},{"i":"冪","o":"幂"},{"i":"凈","o":"净"},{"i":"凍","o":"冻"},{"i":"凜","o":"凛"},{"i":"凱","o":"凯"},{"i":"別","o":"别"},{"i":"刪","o":"删"},{"i":"剄","o":"刭"},{"i":"則","o":"则"},{"i":"剋","o":"克"},{"i":"剎","o":"刹"},{"i":"剗","o":"刬"},{"i":"剛","o":"刚"},{"i":"剝","o":"剥"},{"i":"剮","o":"剐"},{"i":"剴","o":"剀"},{"i":"創","o":"创"},{"i":"劃","o":"划"},{"i":"劇","o":"剧"},{"i":"劉","o":"刘"},{"i":"劊","o":"刽"},{"i":"劌","o":"刿"},{"i":"劍","o":"剑"},{"i":"劑","o":"剂"},{"i":"勁","o":"劲"},{"i":"動","o":"动"},{"i":"務","o":"务"},{"i":"勛","o":"勋"},{"i":"勳","o":"勋"},{"i":"勝","o":"胜"},{"i":"勞","o":"劳"},{"i":"勢","o":"势"},{"i":"勩","o":"勚"},{"i":"勱","o":"劢"},{"i":"勵","o":"励"},{"i":"勸","o":"劝"},{"i":"勻","o":"匀"},{"i":"匭","o":"匦"},{"i":"匯","o":"汇"},{"i":"匱","o":"匮"},{"i":"區","o":"区"},{"i":"協","o":"协"},{"i":"卻","o":"却"},{"i":"厙","o":"厍"},{"i":"厠","o":"厕"},{"i":"厭","o":"厌"},{"i":"厲","o":"厉"},{"i":"厴","o":"厣"},{"i":"參","o":"参"},{"i":"叄","o":"叁"},{"i":"叢","o":"丛"},{"i":"吒","o":"咤"},{"i":"吳","o":"吴"},{"i":"吶","o":"呐"},{"i":"呂","o":"吕"},{"i":"咼","o":"呙"},{"i":"員","o":"员"},{"i":"唄","o":"呗"},{"i":"唚","o":"吣"},{"i":"問","o":"问"},{"i":"啓","o":"启"},{"i":"啞","o":"哑"},{"i":"啟","o":"启"},{"i":"啢","o":"唡"},{"i":"喎","o":"㖞"},{"i":"喚","o":"唤"},{"i":"喪","o":"丧"},{"i":"喬","o":"乔"},{"i":"單","o":"单"},{"i":"喲","o":"哟"},{"i":"嗆","o":"呛"},{"i":"唸","o":"念"},{"i":"嗇","o":"啬"},{"i":"嗊","o":"唝"},{"i":"嗎","o":"吗"},{"i":"嗚","o":"呜"},{"i":"嗩","o":"唢"},{"i":"嗶","o":"哔"},{"i":"嘆","o":"叹"},{"i":"歎","o":"叹"},{"i":"嘍","o":"喽"},{"i":"囉","o":"啰"},{"i":"嘔","o":"呕"},{"i":"嘖","o":"啧"},{"i":"嘗","o":"尝"},{"i":"嘜","o":"唛"},{"i":"嘩","o":"哗"},{"i":"譁","o":"哗"},{"i":"貛","o":"獾"},{"i":"醃","o":"腌"},{"i":"嘮","o":"唠"},{"i":"嘯","o":"啸"},{"i":"嘰","o":"叽"},{"i":"嘵","o":"哓"},{"i":"嘸","o":"呒"},{"i":"嘽","o":"啴"},{"i":"噁","o":"恶"},{"i":"噓","o":"嘘"},{"i":"噝","o":"咝"},{"i":"噠","o":"哒"},{"i":"噥","o":"哝"},{"i":"噦","o":"哕"},{"i":"噯","o":"嗳"},{"i":"噲","o":"哙"},{"i":"噴","o":"喷"},{"i":"噸","o":"吨"},{"i":"噹","o":"当"},{"i":"嚀","o":"咛"},{"i":"嚇","o":"吓"},{"i":"嚌","o":"哜"},{"i":"嚕","o":"噜"},{"i":"嚙","o":"啮"},{"i":"嚥","o":"咽"},{"i":"嚦","o":"呖"},{"i":"嚨","o":"咙"},{"i":"嚮","o":"向"},{"i":"嚲","o":"亸"},{"i":"嚳","o":"喾"},{"i":"嚴","o":"严"},{"i":"嚶","o":"嘤"},{"i":"囀","o":"啭"},{"i":"囁","o":"嗫"},{"i":"囂","o":"嚣"},{"i":"囅","o":"冁"},{"i":"囈","o":"呓"},{"i":"囌","o":"苏"},{"i":"囑","o":"嘱"},{"i":"囘","o":"回"},{"i":"囪","o":"囱"},{"i":"圇","o":"囵"},{"i":"國","o":"国"},{"i":"圍","o":"围"},{"i":"園","o":"园"},{"i":"圓","o":"圆"},{"i":"圖","o":"图"},{"i":"團","o":"团"},{"i":"垵","o":"埯"},{"i":"埡","o":"垭"},{"i":"埰","o":"采"},{"i":"執","o":"执"},{"i":"堅","o":"坚"},{"i":"堊","o":"垩"},{"i":"堖","o":"垴"},{"i":"堝","o":"埚"},{"i":"堯","o":"尧"},{"i":"報","o":"报"},{"i":"場","o":"场"},{"i":"塊","o":"块"},{"i":"塋","o":"茔"},{"i":"塏","o":"垲"},{"i":"塒","o":"埘"},{"i":"塗","o":"涂"},{"i":"塚","o":"冢"},{"i":"塢","o":"坞"},{"i":"塤","o":"埙"},{"i"Line truncated
+1
View File
@@ -0,0 +1 @@
[{"i":"专","o":"專"},{"i":"业","o":"業"},{"i":"丛","o":"叢"},{"i":"东","o":"東"},{"i":"丝","o":"絲"},{"i":"丢","o":"丟"},{"i":"两","o":"兩"},{"i":"严","o":"嚴"},{"i":"丧","o":"喪"},{"i":"个","o":"個"},{"i":"临","o":"臨"},{"i":"丽","o":"麗"},{"i":"举","o":"舉"},{"i":"义","o":"義"},{"i":"乌","o":"烏"},{"i":"乐","o":"樂"},{"i":"乔","o":"喬"},{"i":"习","o":"習"},{"i":"乡","o":"鄉"},{"i":"书","o":"書"},{"i":"买","o":"買"},{"i":"乱","o":"亂"},{"i":"争","o":"爭"},{"i":"亏","o":"虧"},{"i":"亚","o":"亞"},{"i":"亘","o":"亙"},{"i":"亩","o":"畝"},{"i":"亲","o":"親"},{"i":"亵","o":"褻"},{"i":"亸","o":"嚲"},{"i":"亿","o":"億"},{"i":"仅","o":"僅"},{"i":"从","o":"從"},{"i":"仑","o":"侖"},{"i":"仓","o":"倉"},{"i":"仪","o":"儀"},{"i":"们","o":"們"},{"i":"优","o":"優"},{"i":"会","o":"會"},{"i":"伛","o":"傴"},{"i":"伞","o":"傘"},{"i":"伟","o":"偉"},{"i":"传","o":"傳"},{"i":"伣","o":"俔"},{"i":"伤","o":"傷"},{"i":"伥","o":"倀"},{"i":"伦","o":"倫"},{"i":"伧","o":"傖"},{"i":"伫","o":"佇"},{"i":"佥","o":"僉"},{"i":"侠","o":"俠"},{"i":"侣","o":"侶"},{"i":"侥","o":"僥"},{"i":"侦","o":"偵"},{"i":"侧","o":"側"},{"i":"侨","o":"僑"},{"i":"侩","o":"儈"},{"i":"侪","o":"儕"},{"i":"侬","o":"儂"},{"i":"俣","o":"俁"},{"i":"俦","o":"儔"},{"i":"俨","o":"儼"},{"i":"俩","o":"倆"},{"i":"俪","o":"儷"},{"i":"俫","o":"倈"},{"i":"俭","o":"儉"},{"i":"债","o":"債"},{"i":"倾","o":"傾"},{"i":"偬","o":"傯"},{"i":"偻","o":"僂"},{"i":"偾","o":"僨"},{"i":"偿","o":"償"},{"i":"傥","o":"儻"},{"i":"傧","o":"儐"},{"i":"储","o":"儲"},{"i":"傩","o":"儺"},{"i":"兑","o":"兌"},{"i":"兖","o":"兗"},{"i":"兰","o":"蘭"},{"i":"关","o":"關"},{"i":"兴","o":"興"},{"i":"兹","o":"茲"},{"i":"养","o":"養"},{"i":"兽","o":"獸"},{"i":"冁","o":"囅"},{"i":"内","o":"內"},{"i":"冈","o":"岡"},{"i":"册","o":"冊"},{"i":"写","o":"寫"},{"i":"军","o":"軍"},{"i":"农","o":"農"},{"i":"冯","o":"馮"},{"i":"决","o":"決"},{"i":"况","o":"況"},{"i":"冻","o":"凍"},{"i":"净","o":"淨"},{"i":"凉","o":"涼"},{"i":"减","o":"減"},{"i":"凄","o":"淒"},{"i":"凑","o":"湊"},{"i":"凛","o":"凜"},{"i":"凤","o":"鳳"},{"i":"凯","o":"凱"},{"i":"击","o":"擊"},{"i":"凿","o":"鑿"},{"i":"刍","o":"芻"},{"i":"刘","o":"劉"},{"i":"则","o":"則"},{"i":"刚","o":"剛"},{"i":"创","o":"創"},{"i":"删","o":"刪"},{"i":"刬","o":"剗"},{"i":"刭","o":"剄"},{"i":"刹","o":"剎"},{"i":"刽","o":"劊"},{"i":"刿","o":"劌"},{"i":"剀","o":"剴"},{"i":"剂","o":"劑"},{"i":"剐","o":"剮"},{"i":"剑","o":"劍"},{"i":"剥","o":"剝"},{"i":"剧","o":"劇"},{"i":"劝","o":"勸"},{"i":"办","o":"辦"},{"i":"务","o":"務"},{"i":"劢","o":"勱"},{"i":"动","o":"動"},{"i":"励","o":"勵"},{"i":"劲","o":"勁"},{"i":"劳","o":"勞"},{"i":"势","o":"勢"},{"i":"勋","o":"勳"},{"i":"勚","o":"勩"},{"i":"匀","o":"勻"},{"i":"匦","o":"匭"},{"i":"匮","o":"匱"},{"i":"区","o":"區"},{"i":"医","o":"醫"},{"i":"华","o":"華"},{"i":"协","o":"協"},{"i":"单","o":"單"},{"i":"卖","o":"賣"},{"i":"卢","o":"盧"},{"i":"卫","o":"衛"},{"i":"却","o":"卻"},{"i":"厅","o":"廳"},{"i":"厉","o":"厲"},{"i":"压","o":"壓"},{"i":"厌","o":"厭"},{"i":"厍","o":"厙"},{"i":"厐","o":"龎"},{"i":"厘","o":"釐"},{"i":"厢","o":"廂"},{"i":"厣","o":"厴"},{"i":"厦","o":"廈"},{"i":"厨","o":"廚"},{"i":"厩","o":"廄"},{"i":"厮","o":"廝"},{"i":"县","o":"縣"},{"i":"叁","o":"叄"},{"i":"参","o":"參"},{"i":"双","o":"雙"},{"i":"变","o":"變"},{"i":"叙","o":"敘"},{"i":"叠","o":"疊"},{"i":"号","o":"號"},{"i":"叹","o":"歎"},{"i":"叽","o":"嘰"},{"i":"吓","o":"嚇"},{"i":"吕","o":"呂"},{"i":"吗","o":"嗎"},{"i":"吣","o":"唚"},{"i":"吨","o":"噸"},{"i":"听","o":"聽"},{"i":"吴","o":"吳"},{"i":"呐","o":"吶"},{"i":"呒","o":"嘸"},{"i":"呓","o":"囈"},{"i":"呕","o":"嘔"},{"i":"呖","o":"嚦"},{"i":"呗","o":"唄"},{"i":"员","o":"員"},{"i":"呙","o":"咼"},{"i":"呛","o":"嗆"},{"i":"呜","o":"嗚"},{"i":"咏","o":"詠"},{"i":"咙","o":"嚨"},{"i":"咛","o":"嚀"},{"i":"咝","o":"噝"},{"i":"咤","o":"吒"},{"i":"响","o":"響"},{"i":"哑","o":"啞"},{"i":"哒","o":"噠"},{"i":"哓","o":"嘵"},{"i":"哔","o":"嗶"},{"i":"哕","o":"噦"},{"i":"哗","o":"嘩"},{"i":"哙","o":"噲"},{"i":"哜","o":"嚌"},{"i":"哝","o":"噥"},{"i":"哟","o":"喲"},{"i":"唛","o":"嘜"},{"i":"唝","o":"嗊"},{"i":"唠","o":"嘮"},{"i":"唡","o":"啢"},{"i":"唢","o":"嗩"},{"i":"唤","o":"喚"},{"i":"啧","o":"嘖"},{"i":"啬","o":"嗇"},{"i":"啭","o":"囀"},{"i":"啮","o":"嚙"},{"i":"啴","o":"嘽"},{"i":"啸","o":"嘯"},{"i":"㖞","o":"喎"},{"i":"喷","o":"噴"},{"i":"喽","o":"嘍"},{"i":"啰","o":"囉"},{"i":"喾","o":"嚳"},{"i":"嗫","o":"囁"},{"i":"嗳","o":"噯"},{"i":"嘘","o":"噓"},{"i":"嘤","o":"嚶"},{"i":"嘱","o":"囑"},{"i":"噜","o":"嚕"},{"i":"嚣","o":"囂"},{"i":"园","o":"園"},{"i":"囱","o":"囪"},{"i"Line truncated
+3053
View File
File diff suppressed because it is too large. Load diff
+4942
View File
File diff suppressed because it is too large. Load diff
+3053
View File
File diff suppressed because it is too large. Load diff
+4942
View File
File diff suppressed because it is too large. Load diff
+61
View File
@@ -0,0 +1,61 @@
def get_dict(source)
File.read("../#{source}.txt")
end
def generate_format(source, f)
out, header, footer = 3.times.map { "" }
dict = get_dict(source)
header = format_header(source, f)
footer = format_footer(source, f)
dict.each_line do |line|
x, y = line.chomp.split("\t")
out << out_pattern(x, y, f)
end
out.gsub!(/\},\Z/, "}")
header + out + footer
end
def out_pattern(x, y, f)
if f == "sed"
"s/#{x}/#{y}/g\n"
elsif f == "json"
"{\"i\":\"#{x}\",\"o\":\"#{y}\"},"
end
end
def format_header(source, f)
if f == "json"
"["
else
""
end
end
def format_footer(source, f)
if f == "json"
"]"
else
""
end
end
def generate_all(sources, formats)
formats.each do |fo|
sources.each do |so|
out_content = generate_format(so, fo)
save_format(out_content, so, fo)
end
end
end
def save_format(out_content, so, fo)
dir = "../dist/#{fo}/"
filename = "#{so}.#{fo}"
path = dir + filename
File.open(path, "w") { |f| f << out_content }
end
sources = [ "fanjian", "jianfan" ]
formats = [ "sed", "json" ]
generate_all(sources, formats)