Technical Q&A QA1702 How to capture video frames from the camera as images using AV Foundation確かに基本はこういうことなんでしょうが、相変わらずすんなりいかないようになっているので、Apple Developer Forumにまとめときました。

目の前がバス停なんでよく見かけるんですが、結構難しいんじゃないかと思います。斜めから撮ると歪むから端へ行く程読みにくくなるはずですから。ただ正面から撮ろうと何度も撮り直している様子はありませんから、きっと特定の時間帯だけ撮っているんでしょ…

iPhoneでレンズ越しに入ってくる映像をリアルタイムに加工できるというのはこういうイメージで、夜景とかスポーツとかデジカメやビデオカメラにあるいろんなフィルターを、自由にプログラムできるということかもしれない。今回はいわば音感フィルタなるもの…

ジョバンニ・ミラバッシの、自由で、どこか悲しいピアノを聞く。iPhoneには映し出されたスクランブル交差点の映像。ピアノの音が雨音のように、ポツリ、ポツリ、と色を落としては消えて行く。音階パレット、音楽、今そこにある映像。どれだけうまくシンクロ…

特に今回はCPUを音声処理で使用するので、画像処理は可能な限りGPUに任せたい。となると画像（映像のフレーム）をTextureとして次から次に、例えば20fps（毎秒20枚）といったスピードで処理しなくてはいけない。当然これはOpenGLの鉄則、Textureは起動時にロ…

「カメラ」というと、当然ある瞬間の、視覚的な情報を捉えるものですが、ここに音という要素を含めると遊べるのかどうか・・・。録画じゃなくて、あくまで写真で。 先日、最相葉月さんの絶対音感という文庫本を見つけたのですが、９０年代にベストセラーにな…