橋本商会 » shokai

NFCタグサーバーもJavaScriptだけで使えるようにした

shokai — Sun, 20 May 2012 10:42:37 +0000

NFCタグサーバーにもクロスドメインでAjaxできるようにするためにHTTP HeaderにAccess-Control-Allow-Originを追加した。
JavaScriptだけでNFCタグリーダーを使える。

これ → IO-DATAのNFCタグリーダーをHTTP、WebSocket、Socketから使えるようにした

 Eventmachine HttpServerが軽量で使いやすいので、sinatraを使うほどでもないプロジェクトでよく使っている。

class NfcHttpServer  < EM::Connection

  include EM::HttpServer

  

  def process_http_request

    res = EM::DelegatedHttpResponse.new(self)

    puts "* http #{@http_request_method} #{@http_path_info} #{@http_query_string} #{@http_post_content}"

    res.headers['Access-Control-Allow-Origin'] = '*'

    res.headers['Access-Control-Allow-Headers'] = 'Content-Type'

    res.headers['Access-Control-Allow-Methods'] = 'PUT,DELETE,POST,GET,OPTIONS'

    res.status = 200

    res.content = @@tag.to_s

    res.send_response

  end

end

Eventmachine HttpServerはドキュメント全然書かれてないけど、コードが読みやすいのでどうにでもできる。cometとかもできるし。

■参考にした
Ajaxのクロスサイト通信をJSONPを使わないでやってみよう – Back yard : yuya_lush’s report

HTML+JavaScriptをArduinoに直結できるシリアルポートサーバーを作った

shokai — Sat, 19 May 2012 13:06:31 +0000

SerialPort Serverを使うと、HTMLとJSをArduinoに直結できる。JavaScriptを少し書くだけでArduinoに「カーテン開けろ」とか「部屋の明るさよこせ」とか命令を送れるわけだ。
Web系の技術とハードウェアの技術を同時に使うには、間に「つなぎ」が必要なので、必要な機能を全部入れたサーバーを作ってみた感じです。
（github pagesでプロジェクトページ作ってみたんだけど楽でいいですね）

こういうこと。

シリアルポートサーバーはrubygemsでインストールできる。

gem install serialport-server

which serialport-server

serialport-server --help

serialport-server /dev/tty.デバイス名

–helpでヘルプが出る。デバイス名を引数にして起動できる。
Macならsudo gem installで一発でインストールできるはず。

起動するとHTTPサーバー(http://localhost:8783)、WebSocketサーバー(ws://localhost:8784)、TCP Socketサーバー(localhost:8785)の3つが同時に起動する。

HTTPのサーバーはajaxのクロスドメイン制限を超えてデータのやりとりができるようにしてある。シリアルポートサーバーを動かして、HTMLとJavaScriptを書けばArduinoとJavaScriptが直接通信できるというわけだ。
（response headerにAccess-Control-Allow-Originを付ければ良いとyuisekiのはてブを見ていて知ったのでやってみた。）

■デモ
SerialPort Serverのページにも英語で書いたが、簡単なサンプルプロジェクトを日本語でも解説しておく。

1. Arduinoにプログラムを書き込む

2. ArduinoのDigital13番ピンにLEDを、Analog0番ピンにCdSと10kΩの抵抗を接続する

3. SerialPort Serverを起動する

4. Ajax版サンプルを開いて試してみる

5. WebSocket版サンプルを開いて試してみる

WebブラウザからLEDを点灯消灯したり、CdSの明るさの値がリアルタイムにスライダーに反映されているはずだ。
実際にAjaxサンプルのJavaScriptのコードを見てみると簡単さがわかると思う。17行でLEDとCdSを制御できている。

もちろんWebサーバーなので、複数のWebブラウザがSerialPort Serverから同時にデータを読み出そうとしても大丈夫。
増井研で1年以上、遠隔操縦ロボットの制御に使っていたプログラムを元に使っているのでプロセスを起動してたぶん3ヶ月ぐらい放置していても動き続けるぐらいに安定していると思う。

Juliusで音声認識したのだが、精度が低い

shokai — Wed, 16 May 2012 14:35:43 +0000

Julius動かしてみたけど、なんだか認識精度が低くてどうしょうもないのですが、何か間違っているのでしょうか・・？

■まずMacにインストールした

sudo port install julius

homebrewにはパッケージはない。

http://julius.sourceforge.jp/からソース持ってきてコンパイルしても使えるらしいが、juliusは32bitでしか動かないし、Lionではcoreaudioではなくportaudioを使わなければならないらしいのでportaudioも32bitでインストールして・・と色々面倒だ。
homebrewのportaudioをuniversal binaryでインストールできなかったので、自分でjuliusをビルドしてインストールはあきらめた。

音声認識する

which julius_demo

julius_demo

でしばらく待つと、

<<< please speak >>>

となってMacのマイクから音声認識できる。
でも大体間違ってる。

wavファイルから認識してみる。
QuickTimePlayerで[ファイル]→[新規オーディオ収録]で録音できる。
m4aで保存されるので、juliusが認識できるフォーマット(モノラル16kHzのwav)にffmpegで変換した。

ffmpeg -i test.m4a -ac 1 -ar 16000 test.wav

julius_demo -input stdin < test.wav

wav入れたらテキストになってでてきた。でもやっぱりあまりうまく認識してくれない・・

julius_demoの中身はshell scriptだった。

#!/bin/sh

/opt/local/bin/julius -C /opt/local/lib/julius/fast.jconf "$@"

■Ubuntuにもインストールした

sudo apt-get install julius libjulius-dev

ディクテーションキットが別に必要になる。
ダウンロードする。

mkdir ~/tmp

cd ~/tmp

wget "http://sourceforge.jp/frs/redir.php?m=jaist&f=%2Fjulius%2F51158%2Fdictation-kit-v4.1.tar.gz"

tar -zxvf dictation-kit-v4.1.tar.gz

さっき録音したファイルを認識させる

julius -C ~/tmp/dictation-kit-v4.1/fast.jconf -charconv EUC-JP UTF-8 -input stdin < test.wav

やっぱり精度が悪い・・どうすれば・・・

-moduleを付けて起動するとTCP port 10050でサーバーが起動する。

Apache+Passengerでenvironmentの設定

shokai — Mon, 14 May 2012 21:05:03 +0000

いままでsinatra使う時にconfig.ruに

set :environemt, :production

とか

set :environemt, :development

って書いてたんだけど、httpd.confに

RackBaseURI /app_path

RackEnv production

って書けばいいのだった。

twitterの発言をskypeに投げる

shokai — Sun, 13 May 2012 09:05:50 +0000

研究会のskype chatで存在感がない人を忘れないために、研究会のtwitterアカウントでfollowしている人の最近の発言をランダムに投稿するようにしている

3時間ごとに投げる。

ここにコードおいてある
https://github.com/shokai/skype-chat-gateway-mac/tree/master/tools/twitter

skypeへの投稿はSkype Chat Gatewayと、WebブラウザからSkypeチャットできるやつ作ったに書いたskype-chat-gatewayを使っている。HTTPでskype chatが使えるスゴイ奴だよ

args_parserを使うとRubyでコマンドラインアプリ作るのにとても便利

shokai — Fri, 11 May 2012 06:27:25 +0000

args_parserというgemを作りました。
2年前に作ったArgsParserをバージョンアップしていたら互換性が無くなってきたので名前を変えた。
optparseよりもすっきり書けると思う。

■インストール

gem install args_parser

■使い方
試しに、「webページのURLを指定してダウンロードする」アプリを作ってみる。
こういう風に使えるのを作る。

ruby download_webpage.rb -url http://example.com -o out.html

download_webpage.rb

#!/usr/bin/env ruby

require 'rubygems'

require 'args_parser'



parser = ArgsParser.parse ARGV do

  arg :url, 'URL', :alias => :u

  arg  utput, 'output file', :alias =>  , :default => 'out.html'

  arg :verbose, 'verbose mode'

  arg :help, 'show help', :alias => :h

end



if parser.has_option? :help or !parser.has_param?(:url,  utput)

  STDERR.puts parser.help

  STDERR.puts "e.g.  ruby #{$0} -url http://example.com -o out.html"

  exit 1

end



require 'open-uri'

puts 'download..' if parser[:verbose]

data = open(parser[:url]).read

puts data if parser[:verbose]



open(parser[:output], 'w+') do |f|

  f.write data

end

puts "saved! => #{parser[:output]}"

こんな感じで実行できる。

\r\nのファイルが混じっているので\nに直すワンライナー

shokai — Wed, 09 May 2012 14:03:49 +0000

newgemで生成したgemのテンプレートに改行コードが\r\nのものと\nのものが混じっているのが気持ち悪いので、全部\nに統一した。

find * | xargs -n1 ruby -e 'lines = open(ARGV[0]).read.gsub(/\r\n/, "\n"); open(ARGV[0],"w+").write lines'

実行したディレクトリの中のファイルの改行コードが\nになる。

Bundler.requireがエラー出すので、プロジェクトローカルにgemを入れた

shokai — Tue, 08 May 2012 18:04:44 +0000

とある環境でbundle installしてsystemにインストールされたrubygemを使う様にしたら、Bundler.requireがエラー出すようになった。

bundler-1.1.3/lib/bundler/runtime.rb:77:in `require': private method `gsub' called for nil:NilClass (NoMethodError)

プロジェクトローカルにインストールしたらエラーが出なくなった。

bundle install --path gems

■Bundler
最近はbundlerというgemの管理機構が使われている。

Gemfileというテキストファイルを作って、プロジェクトで使用するRubygemsを書いておく。

Gemfile

source :rubygems



gem 'sinatra', '>=1.3'

gem 'twitter'

gem 'oauth', '0.4.5'

gem 'json'

バージョン指定ができる。

bundle install

rubygemsに公開されていないgitリポジトリを指定したりもできるし、一発で全てのgemがインストールできるので開発環境から本番環境にデプロイするのに便利。
メジャーバージョンアップで仕様が大きく変わったgemがあっても問題ない。

require 'rubygems'

require 'bundler/setup'

Bundler.require

require 'yaml'

これでGemfileに書かれたgemがrequireされる。
yamlみたいな標準で入ってるgemは自分でrequireしないとならないっぽい。

簡単なon memory cacheを作った

shokai — Tue, 08 May 2012 07:07:01 +0000

tmp_cacheというgemを作った。

■インストール

gem install tmp_cache

■使い方
cacheなので、memcacheのように有効期限を指定できる。
60秒間生きるキャッシュの場合、61秒後はnilになる

#!/usr/bin/env ruby

require 'rubygems'

require 'tmp_cache'



TmpCache.set('name', 'shokai', 60) # expire 60 sec



puts TmpCache.get('name') # => 'shokai'

sleep 61

puts TmpCache.get('name') # => nil

TmpCacheはグローバルにどこからでも読めるので便利

■利用例
skype-chat-gatewayや、Herokuで秋月電子のRSSを作るで使ってる。

skype-chat-gatewayにHTTPアクセスがあるたびに、何百回もAppleScriptを呼び出してSkype.appと通信させるとひどいことになるのでcacheさせている。
秋月のほうも、新着商品の個別ページ100個以上を見に行っているのでcacheを使わなければ大迷惑になってしまう。
Herokuは無料でmemcachedが使えるけどそれだけの為に（無料なのに）クレジットカードを登録するの嫌だし。

例えば、webページを読みに行くのを1200秒cacheする場合はこんなふうにする。

#/usr/bin/env ruby                                                                                                                                                           

require 'rubygems'

require 'open-uri'

require 'tmp_cache'



def get_page(url, expire=1200)

  TmpCache.get(url) || TmpCache.set(url, open(url).read, expire)

end



url = 'http://shokai.org'



puts get_page(url)



puts get_page(url) # 2回目はcacheから読まれる

UTF-8-MACをUTF-8に変換する

shokai — Mon, 07 May 2012 07:53:53 +0000

Twitterをterminalで見ていると、ごく稀に変な文字が入っているtweetがあって、それがUTF-8-MACだとgeta6に教わった。
Macだと「ぱぴぷぺぽ」など一部の日本語をファイル名にすると変な事が起こるのだが、それの原因がUTF-8-MACらしい。

そういう文字をDBに保存するとのちのち良くないので、Rubyで変換した。
Iconv使ったら簡単だった。

■例

touch ぱぴぷぺぽ

echo は<309a>ひ<309a>ふ<309a>へ<309a>ほ<309a>

となる。

ただし、TerminalやiTerm2で「ぱぴぷぺぽ」をechoやlsしてもふつうに「ぱぴぷぺぽ」になってしまって、Rubyに渡して変換を試せない。
GNU Screen上でechoやlsするとUTF-8-MACの文字を出力できる。

■Rubyで変換
インストール

brew install iconv

gem install iconv

標準入力を全て普通のUTF-8に変換する
convert-macutf.rb

require 'rubygems'

require 'iconv'



ARGF.each do |line|

  puts line

  puts Iconv.iconv("UTF-8", "UTF-8-MAC", line)

end

screen起動してから

touch ぱぴぷぺぽ

ls | ruby -Ku convert-macutf.rb

結果

convert-macutf.rb

convert-macutf.rb

ぱÿぴÿぷÿぺÿぽÿ

ぱぴぷぺぽ

iconv単体で使う時はこう

ls | iconv -f UTF-8-MAC -t UTF-8