报名参加CloudWeGo黑客松,奖金直推双丰收! 了解详情
写点什么

字符编码和 M17N 详解

  • 2009-05-18
  • 本文字数:784 字

    阅读完需:约 3 分钟

James Edward Gray II 近期发表了十个同一系列名为《Understanding M17n》的文章,均是关于Ruby 的字符编码问题。

Ruby 1.9 做出了很多关于字符支持的修改,现在能够很好地支持多种和混合字符编码了。这些需求是在一些项目中确实存在的,尤其是为全世界用户开发的开源项目中。

他从基础开始讲起,介绍了什么是 Unicode 以及其编码方式,接着发表了一些 Ruby 1.8 的帖子,例如使用iconv 进行编码以及Ruby 1.8 是如何处理Unicode 的。然后综合论述了 Ruby 1.9 的 String 以 Ruby 1.9 和其他语言的区别:

通常开发者都会选择一个全能的编码,例如 Unicode 编码,然后所有的数据都会是这个编码格式。Ruby 1.9 采取了一种不同的方法。它不仅仅局限于选择一种编码,Ruby 1.9 能够同时处理超过 80 种编码的数据。

Ruby 1.9 的 m17n 的一个新特性是三种默认编码,而 Ruby 1.8 只有单一的全局变量。但是为什么我们需要这么多编码呢?考虑以下的情景:

我也许希望我的代码是 UTF-8 的,但是一些日本程序员希望它们的代码是 Shift JIS。Ruby 应该支持这个,确实 1.9 也支持了这个特性。我们把这个情景搞复杂一点:想像一下我把我的 UTF-8 的代码打包到一个 gem 之后,有日本程序员希望在它的 Shift JIS 代码重使用这个 gem。我们如何无缝地进行工作?

阅读关于 Ruby 1.9 的三种默认编码的主题。 最后一篇文章包含了各种话题,例如在二进制数据编码和正则表达式数据编码。

阅读完这十个主题之后,你应该已经明白了Ruby 1.9 的强大的m17n 特性以及给你带来的灵感,即使你仍然打算现在坚守在Ruby 1.8 的平台上。如果你并不足够了解Unicode,如果还没有读过的话,你也许需要阅读一下Joel Spolsky 的传世之作《The Absolute Minimum Every Software Developer Absolutely, Positively Must Know About Unicode and Character Sets (No Excuses!)》

查看英文原文: Character Encodings and M17N Explained

2009-05-18 11:471805
用户头像

发布了 90 篇内容, 共 35.7 次阅读, 收获喜欢 5 次。

关注

评论

发布
暂无评论
发现更多内容

「架构师训练营」第四周课后练习

L

高并发系统设计负载均衡架构

架构师修行之路

负载均衡 分布式 微服务

架构师训练营 - 第四周 - 作业二

行者

架构师训练营第1期第4周作业

业哥

极客大学架构师训练营

第四周后端常用技术总结

solike

架构师训练营 - 学习笔记 - 第四周

徐时良

极客时间架构 1 期:第4周 系统架构 - 命题作业

Null

浅析 synchronized

朱华

Java 并发编程 synchronized

【架构笔记之系统架构】架构师训练营第1期第4周

业哥

极客大学架构师训练营

架构师 1 期 - 系统架构作业

ltl3884

极客大学架构师训练营

第四周作业

wanlinwang

极客大学架构师训练营

第三周作业

m

极客时间架构 1 期:第 4 周 系统架构 - 学习总结

Null

第10周学习总结

Vincent

极客时间 极客大学

第四周学习总结

alpha

极客大学架构师训练营

第四周

等燕归

【架构师训练营】第四周作业:系统架构

MindController

系统架构

[架构师训练营第 1 期] 第四周学习总结

猫切切切切切

极客大学架构师训练营

[架构师训练营第 1 期] 第四周命题作业

猫切切切切切

极客大学架构师训练营

手把手教你AspNetCore WebApi:认证与授权

AI代笔

Token ASP.NET Core JWT web api

手把手教你如何在Oasis Second State 社区黑客马拉松获得 50 ROSE

WasmEdge

区块链 智能合约 以太坊 hackathon

设计模式

Zzzz

极客大学架构师训练营

「架构师训练营」第四周课后练习

L

第四周作业 (作业一)

Geek_83908e

极客大学架构师训练营

设计一套RPC框架并非易事

架构师修行之路

分布式 微服务 RPC

第10周作业

Vincent

极客时间 极客大学

第四周作业 (作业二)

Geek_83908e

极客大学架构师训练营

极客大学 - 架构师训练营 第四周

9527

架构师训练营 - 第四周 - 作业一

行者

架构师训练营1期第4周作业

木头发芽

架构师训练营 - 命题作业 - 第四周

徐时良

字符编码和M17N详解_Ruby_Mirko Stocker_InfoQ精选文章