2013年1月22日火曜日

timerを極力排除した動作のデモも公開してみました。

前回の記事でかいた、timerEventを排除した方が動作いいんじゃない?というやつのデモを作成したので公開しました。

動作は前のとあんまりかわらない。
大量にwindowを開いたりして、負荷をかけたらちょっとは違うか?というのはあるもののどうなんだろうか。

もともとeventListenerにくっつけたのが妙にのこっている風だったのを嫌ってやった変更ですが・・・

前のプレーヤー
親 http://49.212.39.17/betaplayer/master.html
子 http://49.212.39.17/betaplayer/slave.html

新しいプレーヤー
親 http://49.212.39.17/betaplayer2/master.html
子 http://49.212.39.17/betaplayer2/slave.html

ちなみに、swf形式のデータを外部で読み込んで利用する動作をwonderflでつくってみました。
親 http://wonderfl.net/c/l9v8
子 http://wonderfl.net/c/333s
どうやら、p2pのアドレスにrtmfp:を指定しているからかもしれませんが、ドメインが違うと同じp2pアクセスと認めてくれないっぽいですね。
前のプレーヤーと新しいプレーヤーでは、通信できたんですが、wonderfl上のプレーヤーでは通信できませんでした。

globalのrtmfpサーバーの場合はまた話がちがってくるのかもしれませんね。

ま、いいや。

2013年1月21日月曜日

p2pのライブデータshare動作からtimerEventを極力排除してみました。

p2pの動作ですが、なかなかいい感じにならなかったので、chromeのタスクマネージャーをみていました。

見ていると、CPUがどんどん食われていく感じでした。

前々から、EventListenerでくっつけている動作があやしい気がしていたので、ちょっといじってみました。

timerをつかった一定期間ごとの動作が必要なのは、主に以下
・httpStreamの新しいデータ取得まわり。
・p2pSupplyStreamの生死判定用ping処理
・p2pSourceStreamの生死判定用ping処理
・rtmfpConnectionの接続相手探しの状態管理処理
・dataManagerのstreamのデータ監視処理
この5つがtimerが必要なところでした。

一番はじめにつくったのは、それぞれのクラスの中でtimerオブジェクトをつくって動作させるというものでした。
これが結構重くて、使い物になりませんでした。
プレーヤーの再生もやっていたらだんだんと悪くなっていくという・・・

そこで思ったのがtimerをいっぱいつくらなくても1つのタイマーを使い回してそれぞれのクラスでaddEventListenerをすればいいじゃないかというもの。
この動作に変えてみたところ、まぁまぁまともな動作をするようになったので、いいかなと思っていたんですが、今日タスクマネージャーをみつつ動作を確認していたところ、どうやらp2pの切断等が発生したときに、オブジェクトが残っているみたいで、CPUの利用量がじわじわあがっていく感じでした。

で、先ほどdataManagerのtimerイベントから、他のstreamのデータをキックする形にしてみたところ、いい感じの動作になりました。

うーん、やっぱりeventDispatcher関連は好きになれないねぇ・・・

2013年1月20日日曜日

p2pベースで動作するプレーヤーをとりあえず公開してみました。

とりあえず、ある程度動作を向上させたので公開してみます。
ここまでくるのに3年くらいかかったわ・・・

■概要
ソースコード:https://github.com/taktod/TakStreaming2/tree/flashCode3
rtmfpの親:http://49.212.39.17/betaplayer/master.html
rtmfpの子:http://49.212.39.17/betaplayer/slave.html

構成的にはこんな感じ

いまのところ家のLAN内でしか動作確認していないので、適当なときに有志募っていつか動作確認したいところ。

ipMulticastMemberUpdatesEnabledを有効にして、ローカルネットワークでのみp2pが成立するようになっています。

■確認の仕方。
1:master用ページとslave用ページを開きます。
2:それぞれplayをクリックしてplay実行します。
3:ブラウザのファイルダウンロード状況を確認して、httpによるflfやflmのダウンロードがなくなっているのに再生が続くようになったら、p2p経由でデータの共有がうまくいっていることになります。


■見所
1:簡単に扱えるようにしてある。
導入しやすいように、プログラムは極力簡単に扱えるようにしてあります。
参考:master.mxml
Factoryクラスにsource(データ元)とsupply(提供先:なくてもいい)を設定してから
netStreamとvideoを抜き出して利用するだけ。

2:安定化
segmentのダウンロードが実行できれば問題なく動作するようにつくってあります。
複数のデータソースを共存できるように設計してありますので、基本http経由で、可能ならばrtmfpでデータを共有するというような形で動作できます。
よってサーバーと回線のコストを極力落とすことが可能です。

3:既存のrtmpとの親和性
flazrを利用しrtmpサーバーから放送データを取得したり、red5のアプリケーションとして導入できるようになっています。

■いまのところわかっている問題
 致命的なもの
・放送が停止すると、最終パケットがループで繰り返し放送される。
・slaveのみでのネットワーク構築動作未実装(自動master選出処理)
・タイミングによっては、とまったりする?

・rtmpベースやflvファイルベースの動作が未実装
・回線の弱いクライアント処理の未実装


とこんな感じのプログラムに仕上がってきました。
まだまだ突っ込みどころは多いので、どんどん改良していかないとねw

2013年1月14日月曜日

とりあえずなp2pができた。

まだまだ、いろいろと問題があるけど、とりあえずな動作はできたのでブログに書いときます。
構成はこんな感じ
サーバー内部
[flazrでlocalhostのFMSにrtype-finalの動画をliveでpublish]
[別のFlazrでTakStreaming化(http用)]
[apache経由でデータを提供]
クライアント側(送信側)
[httpStreamとしてデータをDL]
[BaseStreamにデータを渡すことで自身のプレーヤー上で再生]
[rtmfpのsupplyStreamにデータを転送]
クライアント側(受信側)
[rtmfpのsourceStreamでデータをDL]
[BaseStreamにデータを渡すことで自身のプレーヤー上で再生]


左がhttpStreamで動作しているmaster接続、自分ところで再生したあとに、rtmfpのSupplyStreamに受け流してます。
 右がrtmfpのSourceStreamで動作しているslave接続
いまのところ4ウィンドウくらい開くとPCが悲鳴をあげるっぽいです。

いまのところの問題点は以下
致命的なもの
・p2pネットワークが切断したときに、暴走する。(ない接続にデータを送ろうとしてるっぽい。)
・500秒ほど見続けていると、非常に重くなってくる(どこかでデータ解放わすれてる?)


まずいもの
・p2p受けて側にflmデータcacheがないので、たまにおいつく(http側では、2データ先行してDLすることでおいつかないようにしてある。)
→netStream.bufferTimeでコントロールできるので、そちらに任せることにする。

やっときたいもの
・httpとrtmfpを併用する動作未実装
・回線負荷低減処置が未実装
・rtmpをデータソースとする動作
・生flvをデータソースとする動作
その他もろもろ。

さて、もうちょっと開発をすすめますかね^-^

2013年1月12日土曜日

Flashが急に再生されなくなった。対処法メモ

iMac(Moutain Lion) + FlashBuilder4で開発しています。
でコンパイル後の出力確認はChromeでやっていたわけですが

急にコンパイルしたあとに動作しなくなりました。
Flashは読み込まれているみたいなんですが、真っ白で動作してません。

どうやらgoogle独自のchrome用のflashがわるいみたいです。
なので、chrome://pluginsにアクセスして設定を書き換えます。
before
after

で、実行すると動作するようになりました。

PPAPI邪魔っす。

まぁ、あとでPPAPIでも動作するようにしないとリリースできないから、調整しないとなぁと思ってはいますけどね。

追記:一応気になったのでもうちょっと調べてみたんですが、http://localhost/~[user]/player.swfでアクセスしたところPPAPIのFlashでも動作できました。なんかのサンドボックスが問題になる感じですかね。
僕的には、気にせずにほっとけばいいかなといった感じです。

Flashで流しているデータのコーデック情報を調べる

FlashのnetStreamに流れているデータのコーデックを調べる術が一応あるっぽいですが、
公式のドキュメントをひっくり返してもないみたいです。

信用してもいい情報なんでしょうか・・・
audioコーデックはこんな感じ
 videoコーデックも同じような感じ
uintで定義されているので、コーデックID番号がはいっているみたいですね。

10:AAC 7:AVC(h.264)みたいな感じ?
実際に実装してみた。

audioCodec:2(mp3だったっけ?) videoCodec:7(AVC)
ちゃんととれてます。

2013年1月3日木曜日

動画再生させてみる。

前回の記事の続きです。

動画再生をやらせてみます。
動画再生には、2つ方法があるらしくMPMoviePlayerControllerを使うやり方と
AVPlayerを使う方法の2つがあるみたいです。

まだ理解が進んでいないので、とりあえずMPMoviePlayerControllerをつかって動作させてみます。
まずはライブラリの取り込みが必要です。
Frameworkの項目にデータを追加するのですが、きちんとした手順でやらないとだめみたいです。
ダメな例
一番はじめにやってみたのは、frameworkをそのまま追加するやり方
この方法だとリンクまわりがきちんと設定できず、コンパイルエラーになってしまいました。

で、きちんと動く正しいと思われるやり方
1:アプリケーションのプロパティーを開く。
2:Build PhasesのLink Binary With Librariesを選択する。
3:+をクリックして、iOS用のMdiaPlayer.frameworkを選択する。
すると追加ができます。

さて、ViewControllerの部分で、動画の表示をさせたいので、プログラミングをすすめていきます。
まず、ViewController.hの部分でライブラリをimportします。
続いてViewController.mに記述を追加していきます。
1:controllerのpropertyとしてMPMoviePlayerControllerを定義しておく。(local変数として定義するとコントロールできなくなる。)

2:プログラムを記述する。

- (void)viewDidLoad
{
    [super viewDidLoad];
 // Do any additional setup after loading the view, typically from a nib.
    NSURL* url = [NSURL URLWithString:@"http://49.212.39.17/mario/mario.m3u8"];
    self.videoPlayer = [[MPMoviePlayerController alloc] initWithContentURL:url];
    self.videoPlayer.view.frame = CGRectMake(0, 0, 320, 240);
    [self.videoPlayer prepareToPlay];
    [self.view addSubview:self.videoPlayer.view];

    UILabel* label = [[UILabel alloc] init];
    label.text = @"aiueo";
    [label sizeToFit];
    [self.view addSubview:label];
}

urlで適当なhttpLiveStreamingのデータを指定
で、それを利用して、MPMoviePlayerControllerを作成。
viewのframeのところに適当なサイズを指定して、動作するようにした後に
videoPlayerのprepareToPlayメソッドを呼び出して準備させる。
viewに結びつけてデータを表示するようにする。
で完成


コメントがながれるようにしたいので、labelを上に載せてみた。問題なさそうですね。

あとはurlスキーム対応やったり、webSocketあたりでリアルタイムでコメント追記できるようにやったり、コメントをtwitterに投稿できるようにやったり、srtファイルを字幕として取り込めるようにやったりすれば、いい感じのアプリがつくれないこともなさそう。