Corporate Perl in Recruit, OpenSocial and Emoji‎ - YAPC::Asia 2009 Tokyo

YAPC::Asia 2009 Tokyo C ‎ orporate Perl in Recruit, OpenSocial and Emoji‎ 2009.09.10 Yusuke Kawasaki (kawanet) Recruit Media Technology Labs http://mtl.recruit.co.jp/ YAPC::Asia 2009 Tokyo 1

Yusuke Kawasaki（川﨑有亮） http://www.kawa.net/ http://twitter.com/kawanet YAPC::Asia 2009 Tokyo 2

CPAN Author • XML::TreePP • XML::FeedPP • Class::Accessor::Children • Lingua::JA::Romanize::Japanese • Lingua::KO::Romanize::Hangul • Lingua::ZH::Romanize::Pinyin • Encode::JP::Emoji • Unicode::Emoji::Base http://search.cpan.org/~kawasaki/ YAPC::Asia 2009 Tokyo 3

XML::TreePP • XML string from/to Perl hash object Pure Perl, fast, easy and stable • use XML::TreePP; my $tpp = XML::TreePP->new(); my $hash = {elem=>"value"}; print $tpp->write($hash); # XML string • my $xml = "<elem>value</elem>"; my $tree = $tpp->parse($xml); print Dumper($tree); # Perl hash object YAPC::Asia 2009 Tokyo 4

Emoji Picture characters commonly used on mobile phones in Japan YAPC::Asia 2009 Tokyo 5

Emoji in private code point • Mobile phone companys use their own code point in PUA (private use area). Ex. “heart” • DoCoMo KDDI SoftBank U+E6EC U+E595 U+E022 SJIS-F991 SJIS-F7B2 SJIS-F962 • We need translation maps for each pair of Emoji sets. YAPC::Asia 2009 Tokyo 6

Google’s code points • Gmail supports “emoticon” characters. • They also uses PUA again and has their translation map from/to Japanese Emojis. • Then, Google’s “emoji4unicode” project has proposed unified code points of Japanese Emojis to Unicode standard. Thanks! • http://emoji4unicode.googlecode.com/ YAPC::Asia 2009 Tokyo 7

Two Perl Modules Released • Unicode::Emoji::E4U – Emoji mappings based on Google’s emoji4unicode project – Pure Perl OO interface for their table • Encode::JP::Emoji – Emoji encodings and cross-mapping tables in pure Perl – Pure Perl encodings for Encode.pm – XS (UCM) version of this was canceled. YAPC::Asia 2009 Tokyo 8

Encode::JP::Emoji Detail 1. 各キャリアの Shift_JIS 絵文字コードと UTF-8 絵文字コードを相互変換できます。 2. emoji4unicode の提供するテーブルにより、各キャリアの絵文字を相互変換できます。 3. 絵文字が存在しない場合は、fallback によりテキストまたは IMG タグに変換できます。 4. 日本の 3 キャリアに加えて、Google が内部で利用している絵文字コードにも変換できます。 5. emoji4unicode が提案中の PUA を利用しない Unicode との相互変換に対応します。 6. pure Perl 実装のため、レンタルサーバ等でも FTP アップロードのみで利用できます。 7. pure Perl 実装にもかかわらず、実用的な変換処理速度を確保しています。（Encode::JP::Mobile 比） YAPC::Asia 2009 Tokyo 9

Encode::JP::Emoji Usage use Encode; use Encode::JP::Emoji; # from DoCoMo <U+E6E2> to Google <U+FE82E> my $keycap1 = "¥xEE¥x9B¥xA2"; Encode::from_to($keycap1, 'x-utf8-e4u-docomo', 'utf8'); # from KDDI <SJIS+F7F5> to SoftBank <SJIS+F747> my $scream = "¥xF7¥xF5"; Encode::from_to($scream, 'x-sjis-e4u-kddiapp', 'x-sjis-e4u-softbank3g'); Encode::JP::Mobile is an alternative module to do above. YAPC::Asia 2009 Tokyo 10

Encode::JP::Emoji Internal 例：KDDI Shift_JIS から KDDI Unicode に変換する内部コード。（概念）内部的には、いったん CP932 で decode してから、tr// 等で置換する仕組み。 sub decode { my ($self, $octets, $check) = @_; $self->before_decode($octets, $check); my $string = $self->byte_encoding->decode($octets, $check); $self->after_decode($string, $check); $string; } sub after_decode { $_[1] =~ tr [¥x{E234}-¥x{E342}¥x{E5B5}-¥x{E5DF}] [¥x{E5CD}-¥x{E5DF}¥x{EA80}-¥x{EAFA}¥x{EB0E}-¥x{EB8E} ¥x{EAFB}-¥x{EB0D}¥x{E5B5}-¥x{E5CC}]; } YAPC::Asia 2009 Tokyo 11

Ex. Emoji for Dung • DoCoMo (don’t have emoji for dung) • KDDI PUA <U+E4F5> • SoftBank PUA <U+E05A> • Google PUA <U+FE4F4> • Unicode Standard proposed <U+1F410> • 4バイトUTF-8 なので、MySQL 5 は非対応 YAPC::Asia 2009 Tokyo 12

OpenSocial Container By Perl RECRUIT は OpenSocial コンテナを実装中です YAPC::Asia 2009 Tokyo 13

OpenSocial コンテナを開発中 http://creyle.jp/ • リクルートは、『CREYLE』サービスにて OpenSocial コンテナを実装しています。 • OpenSocial アプリに対応します。 • ディベロッパー向け β リリース： 2009年 10月予定 YAPC::Asia 2009 Tokyo 14

OpenSocial • OpenSocial is a set of APIs for SNS. • Many SNSs in the world, including Mixi in Japan, support OpenSocial apps. • Two way to access to social network ■ – JavaScript library interface ■ – RESTful XML / JSON-RPC protocols ■ YAPC::Asia 2009 Tokyo 15

Apache Shindig • An OpenSocial container implemention by Apache incubation project. • Consists of four parts: – Gadget Container JavaScript – Gadget Rendering Server – OpenSocial Container JavaScript – OpenSocial Data Server • Java and PHP version of it released. • No Perl version yet. YAPC::Asia 2009 Tokyo 16

Importing Shindig to Perl • We’re importing Shindig’s RPC Data API handling servlets to Perl! • Apache + FastCGI + HTTP::Engine ApiServlet.pm Database Layer AppDataHandler.pm AppDataService.pm CollectionOptions.pm SNS Data Gadget DataRequestHandler.pm Website RPC API Render DataServiceServlet.pm Core Servlet Servlet JsonRpcServlet.pm PersonHandler.pm PersonService.pm FastCGI / Perl PHP RequestItem.pm ResponseItem.pm Apache RestRequestItem.pm RpcRequestItem.pm : YAPC::Asia 2009 Tokyo 17

osapi（通称：オサピー）supported • 従来の OpenSocial JavaScript インターフェースに加えて、 osapi（通称：オサピー）に対応しています。 • newIdSpec 不要で簡潔な記述となり、開発の敷居を下げます。 • バッチリクエストにより、多数の API 呼び出しを束ねて高速化。 XML: <Require feature="osapi" /> JavaScript: var batch = new osapi.newBatch(); batch.add('members', osapi.people.get({ userId: '@self', fields: ['id','displayName','thumbnailUrl'] })); batch.execute(callback); YAPC::Asia 2009 Tokyo 18

CREYLE × OpenSocial • ガジェットコンテナ（ガジェットレンダラ）は PHP 版 Shindig を採用しています。 • RESTful、JSON-RPC の API（データサーバ）を Perl で独自実装しました。（Shindig の一部クラスを Perl に移植） • OpenSocial 0.8.1 準拠で Mixi アプリ互換!? 一部、0.9 仕様を先取り採用しています。アルバム、メディア、メッセージに対応。 osapi（通称：オサピー）で開発も快適です。 • 2009年10月ディベロッパー向けβ公開予定。 • ご興味・ご関心のある方、ぜひお知らせ下さい。 YAPC::Asia 2009 Tokyo 19

MA5 Web Application Contest 今年も開催します！ http://mashupaward.jp/ YAPC::Asia 2009 Tokyo 20

登録は今スグ！ http://mashupaward.jp/ 21

Mashup Awards 5 (通称：MA5) ◇主催：Mashup Awards 実行委員会 ◇参加登録期間： 2009年9月10日（木）～11月4日（水） ◇作品応募期間： 2009年9月25日（金）～11月4日（水） ◇表彰式： 2009年11月29日（日）※予定 ◇ウェブサイト： http://mashupaward.jp/ ◇公式ハッシュタグ： #MA5 ◇最優秀賞賞金： 100万円 ◇作品応募条件：参加協力企業・団体が提供する API から少なくとも1つ利用して、作品を制作すること。応募時点でのインターネット公開済・未公開は問わない。詳細・応募方法は、公式ウェブサイト http://mashupaward.jp/ を参照。 YAPC::Asia 2009 Tokyo 22

MA5 協力企業 • MA5 は、50社以上の協力企業が参加。 • 各社が提供する API のうち 1つ以上利用して、ウェブサイトを制作し、ご応募ください！ • API 提供企業は追加募集中！ API 提供企業以外の協力企業・団体（コミュニティ）も歓迎します。 YAPC::Asia 2009 Tokyo 23

MA5 Media Sponsors YAPC::Asia 2009 Tokyo 24

MA5 Leading Partners MA5 は、下記リーディングパートナーの協賛・協力によって、運営されます。 YAPC::Asia 2009 Tokyo 25

ChaMap – MA4 Grand Prix Geo location based chat communication platform service using Google Maps, Language API and some other APIs. Real time translation and read out in English. http://www.chamap.net/ YAPC::Asia 2009 Tokyo 26

Get 1,000,000 Yen on MA5! 最優秀賞は賞金100万円！参加登録は今スグ！ mashupaward.jp YAPC::Asia 2009 Tokyo 27

まとめ • リクルートは昔も今も、Perl を使っています。 Perl の普及、YAPC・JPA を応援しています。 • リクルート Web サービスは、mod_perl。 http://webservice.recruit.co.jp/ • CREYLE は、FastCGI + HTTP::Engine。 OpenSocial コンテナを2009年10月公開予定！ http://creyle.jp/ • MA5 開発コンテストを開催中。賞金100万円！ http://mashupaward.jp/ YAPC::Asia 2009 Tokyo 28

Thank you! （液晶拭きも使ってね）川﨑 http://twitter.com/kawanet 石橋 http://twitter.com/iandeth YAPC::Asia 2009 Tokyo 29

Corporate Perl in Recruit, OpenSocial and Emoji‎ - YAPC::Asia 2009 Tokyo

by Yusuke Kawasaki on Sep 12, 2009

Accessibility

Categories

Tags

Upload Details

Usage Rights

2 Embeds 8

Statistics

Corporate Perl in Recruit, OpenSocial and Emoji‎ - YAPC::Asia 2009 Tokyo — Presentation Transcript

http://www.slideshare.net	5
http://coderwall.com	3