コグノスケ

初めてのOpenVX

目次: OpenCL

OpenCV＋OpenVXのデモンストレーション（GitHubへのリンク）を動かしてみました。

VirtualBoxのディスクイメージを使えば、何もしなくてもQtEditorとCMakeで簡単にビルド＆実行できますが、それだけでは何が何だかわかりませんので、あえて手動でビルドしてみます。

いくつかサンプルが含まれていますが、Harris Cornerと呼ばれる角検出のデモであるsolution_tutrial1を題材にして、ビルド方法と動かし方を書こうと思います。

サンプルコードはGitHubからcloneすればよいです。その際READMEにある通り、tutorial_videosディレクトリを作成して、動画ファイル（リンク先）をダウンロードして入れておくと良いです。

もし既にVirtualBoxで試しているなら、scpなりなんなりでディレクトリごとコピーしても良いです（動画ファイルも入っています）。ホームディレクトリのopenvx_tutorialというディレクトリに入っています。

ビルド

必要なものはOpenCVとOpenVXのライブラリです。

OpenCVのビルドはメチャクチャ面倒くさそうなので、apt-get install libopencv-devでインストールしてしまうのが楽です。

OpenVXはDebianのパッケージになっていないようなので、自分でビルドする必要があります。

Khronosのサイトに「OpenVX 1.2 sample code (updated January 17, 2018). 」があるので、このコードを使います。（Khronosへのリンク）

$ tar xf openvx_sample_1.2.tar.bz2
$ cd openvx_sample
$ make -j4

成功するとout/LINUX/x86_64/releaseというディレクトリの下に、libopenvx.soが生成されているはずです。installはやってもやらなくても動かせるので、今回はinstallせずに続行します。

サンプルのビルド

次にサンプルコードをビルドします。

$ cd openvx_tutorial/tutorial_exercises/solution_exercise1
$ g++ solution_exercise1.cpp -lopencv_imgproc -lopencv_videoio -lopencv_highgui -lopencv_core -L/path/to/openvx_sample/out/LINUX/x86_64/release -lopenvx

本当はCMakeを使えば依存ライブラリを勝手に調べてくれますし、オプションを手で指定する必要はありませんが、ここではあえて -lオプションでOpenCVとOpenVXのライブラリを明示的に指定しています。

ビルドがうまくいったら実行します。

$ LD_LIBRARY_PATH=/path/to/openvx_sample/out/LINUX/x86_64/release ./a.out

OpenVXのライブラリを /usr/libなどにinstallしていない場合は、この例のようにLD_LIBRARY_PATHでOpenVXライブラリの場所を教える必要があります。

Harris-corner, tracking Demo

うまくいけば、ウインドウが出て、右下からたくさんの人が歩いてくる動画が出ます。また、検出された角に赤い点が打たれていて、点の動きがトラッキング（黄色い矢印）されている様子が表示されるはずです。

お気に入りのマンガ

目次: マンガ紹介

お気に入りのマンガ紹介シリーズ。

Kindle Fire HDは大量の本を入れると動作がおかしくなる（Kindleアプリが落ちる、起動しなくなる）ので、本は読み終わったらいったん端末から削除し、読み返したくなったらまたダウンロードする運用で使っています。

そんな中、既読かつKindle内に残り続けている本、いわゆる「お気に入り」をいくつかピックアップしてみます。

あまり意識していませんでしたが、異世界転生系小説のコミカライズが多いですね…。

転生物

乙女ゲームの破滅フラグしかない悪役令嬢に転生してしまった…（10巻、2018年〜）

女性が主人公で、乙女ゲームの世界の公爵令嬢に転生しバッドエンド回避のために頑張る作品です。
シチュエーションはありきたりですが、かなりギャグ寄りなのと、転生物の定番である現代知識を振るう無双要素があまりないので、面白い毛色の作品です。今のところ一番の楽しみです。

戦国小町苦労譚（16巻、2017年〜）

農業学校に通う女子高生が戦国時代に飛ばされ、織田信長の家臣として現代農業の知識で無双する、異世界転生物で少し変わった設定の作品です。
現代知識で無双する作品は、大抵、異世界の住人が極端に無能で何だか見ていて可哀想になるんですけど、この作品は主人公周辺も割と曲者で面白いです。農業系に詳しくないせいか、農業ネタも新鮮で楽しいです。

公爵令嬢の嗜み（8巻、2016年〜）

乙女ゲームの〜、とほぼ同じ転生物ですが、こちらはギャグ成分は少なめで、国や領地運営がテーマです。
主人公の現代知識無双はあるものの、周辺のメンバーがかなり強いのが特徴です。主人公だけのワンマンチームで他全員が飾りになっている作品ではないです。良いバランスだと思います。

転生物以外

はんどすたんど！（全3巻、2016年〜2018年）

体操をテーマにした日常系のギャグ漫画です。ギャグが中心で、体操成分は半分くらいですかね？
独特のゆるいギャグが良くて、クセになります。先日、完結してしまいました。もっと読みたかったな〜。

球詠（15巻、2016年〜）

野球漫画です。百合成分もあるのかな？ややギャグ寄りですが、野球もちゃんとやっていて、駆け引きが面白いです。
ページの都合か、セリフ回しが独特なだけなのか、会話の受け答えが変なときがありますが、面白さには関係ないので、最近はあまり気にせず読んでいます。

野球漫画は球詠、メジャー2nd、グラゼニくらいしか読んだことないですけど、どれも面白いですね。

Kindle Fireのシステムアップデート

目次: Kindle

Kindle Fireはときおりシステムアップデートが勝手に降ってきて、気づいたら更新されています。

Kindleアップデート

アップデートしてくれるのは良いですけども、バッテリー駆動の時でもお構いなしに始まるのが結構怖いです。

当然、アップデート開始前に一定の残量（例えば50％以上、とか）があるかどうか見てから、アップデートを開始しているとは思いますが、バッテリーが弱っていて、アップデート中に一気にバッテリー残量が枯渇して電源が落ちたら、文鎮になってしまうのでは……？

メモ: 技術系の話はFacebookから転記しておくことにした。11/9の投稿が元、一部加筆。

ROCK64のアナログオーディオ - その3 - I2S2を認識しない問題解決

目次: ROCK64/ROCKPro64

linux-nextで動かないROCK64のI2S

昨日（2018年11月10日の日記参照）の続きです。残る問題は3つありました。

• I2S1はなぜか動かない
• I2S2はSPDIFと資源が衝突して認識しない
• ACODECはTRMに何も情報が載っていない

2番目の「認識しなくなる問題」の原因が判明しました。

DMAの資源は有限です

I2S2を有効にするとSPDIFが使えなくなる問題は、DMAの資源が枯渇していたせいでした。

RK3328はARMのPL330（or互換）のDMAを持っています。SPI, UART, I2S, SPDIF, PWM, PDMなど16のハードウェアがこのDMAを使えますが、実は同時に使えるのは8つまでという制約があります。知るかそんなこと……。

オーディオ系のハードを全てdisableにしたときのDMA資源の割り当ては、

• 0: SPI TX
• 1: SPI RX
• 2: UART RX
• 3: UART TX

このようになっていて、残りは4つです。

I2S0, 1, 2はそれぞれDMA資源を2つ使い（TX, RXがあるため）、SPDIFは資源を1つ使います（TXしかないため）。

Rockchip Linux（Rockchipが独自にメンテナンスしているLinuxのツリーのこと）の設定ではI2S0, I2S1のみを有効にしてSPDIFを切り捨てています。ちょうど資源を8つ使いきる設定ですね。ROCK64はピンヘッダにしかSPDIF信号が出せませんし、捨てるのも妥当かなとは思います。

ダメなパターン

私が前にエラーになってできないと言っていたパターンはI2S0, I2S1, I2S2, SPDIFを有効にするパターンです。この場合、

• 0: SPI TX
• 1: SPI RX
• 2: I2S0 TX
• 3: I2S0 RX
• 4: I2S1 TX
• 5: I2S1 RX
• 6: I2S2 TX
• 7: I2S2 RX
• SPDIF TX -> エラー！

以上のようにDMA資源が足りなくなり、エラーになってしまいます。

微妙なパターン

ちなみにI2S0, I2S1, SPDIFを有効に（11/16: I2S2 → I2S1に訂正）すると、一応動くのですが、割り当てを調べると、

• 0: SPI TX
• 1: SPI RX
• 2: I2S0 TX
• 3: I2S0 RX
• 4: I2S1 TX
• 5: I2S1 RX
• 6: SPDIF TX
• 7: UART RX
• UART TX -> エラー

このようにUARTが犠牲になってしまうようです。Audioが動いても、UARTが死んじゃうのはダメな気がします。

（11/16加筆）UARTはDMAが無効になっても動作はしますので、死んでしまうという言い方は間違いでした。正しくは、Audioのために勝手にUARTのDMAを無効にしてしまうのはダメな気がします。デバイスツリー上は有効になっているように見えるので。

正解は特にない

せっかく鳴るようになったSPDIFを活かすか、Rockchip Linuxに合わせるか、さて、どうしたもんかなあ。

メモ: 技術系の話はFacebookから転記しておくことにした。少し加筆。

ROCK64のアナログオーディオ - その2 - I2SのDMA問題

目次: ROCK64/ROCKPro64

ROCK64のI2Sが動かない

先日（2018年7月22日の日記参照）買ったRockchip RK3328搭載ボードROCK64で遊んでいます。

RockchipのSoCで動くLinuxはRockchipがメンテナンスしているLinux（以降Rockchip Linux）ですが、実はLinuxの本流開発ツリー（以降linux-next）も動作します。

しかしlinux-nextの方は全く音が出ません（speaker-testで叩くとxrun_recovery faild: -5, Input/output errorが出ます）。

以前S/PDIFも全く動かなかったのですが、原因が分かったのでパッチを送って直しました。今は出音までできているはずです。しかしI2Sは原因が違うらしく、なぜ動かないのかさっぱりです。

Rockchip Linuxとの差

I2Sのレジスタ情報はTRM（Technical Reference Manual）に載っていたので、それを見つつRockchip Linuxとレジスタ値を同じに揃えましたが、I2Sは微塵も動きませんでした……。

I2S以外のドライバのバグを疑い、Rockchip LinuxのI2Sドライバを丸ごとコピーしたら、動いてしまいました。疑いはハズレ、つまりI2Sドライバに何らかのバグがあることは確定です。一体何が違うんでしょう。diffを見ましたが差分の意味がわかりません。

差分は多くないので、力技でRockchip Linuxからlinux-nextに1つずつ差分を移植していって、動作するかどうか確かめました。原因はdevm_snd_dmaengine_pcm_register() の第2引数（config）にNULLを渡すかどうか、でした。

私には、その違いの意味するところも、現在のlinux-nextのコードの何が悪いのかも、さっぱりわかりません。

差分の意味

動作とコードを追ってみると、現在のlinux-nextのコードはstruct snd_dmaengine_pcm_configのprepare_slave_configを設定し忘れているため、全くDMA転送設定がされていないことがわかりました。

要は、音声データを全くI2Sハードに送っていなかったんです。そりゃ動くわけないわ。

Rockchip Linuxはなぜ動くのか

Rockchip Linuxはどうしていたかというとdevm_snd_dmaengine_pcm_register() の第2引数にNULLを指定していました。何も指定していないのに、どうして動くのでしょう？同じバグを踏まないのでしょうか？

実は第二引数にNULLを指定するとALSAのフレームワーク側でprepare_slave_configにsnd_dmaengine_pcm_prepare_slave_config() を指定した状態と同等に扱われます。この働きにより、無事動作していたのでした。わかるかそんなの。

知っていれば秒殺系のバグでしょうけど、私はぱっと見ではわかりませんでした。

バグの修正としてはたった1行なんですが、理解するまで2日掛かりました。Linux詳しい人はもっと早く解析できると思います……。Linuxを触っているとこういうの多いので、もっとLinuxパワーが欲しいです。

せっかく判明したバグなのでALSA MLにパッチをぶん投げておきました。

まだまだ問題は山積み

ちなみに、これで万事解決ではなく、アナログ音声端子から音を出すにはI2S1とACODECというハードを叩かないといけないです（今回動いたのはI2S0）。今わかっているだけで、

• I2S1はなぜか動かない
• I2S2はSPDIFと資源が衝突して認識しない
• ACODECはTRMに何も情報が載っていない

これだけの問題があります。Rockchip Linuxは何らかの方法で問題を解決しているはずなのですが、今のところ私にはさっぱりわかりません。

私のような門外漢が四苦八苦するより、Rockchipの中の人がlinux-nextに修正パッチを投げてくれる方が断然早いんですけどねえ。あまりlinux-nextにはご興味がないのでしょうか。

遠くに映せ

LANケーブルでHDMI伝送できる世界初の "GPU搭載" HDBaseTカード - PCWatch を読んで。

面白い製品だな〜と思いつつ、今一つこの製品の価値が理解できていませんので、少し調べてみました。

私の予想するこの製品の魅力は、

• 価格: LANケーブルはHDMIケーブルより安い
• 距離: HDMIの伝送距離は短い、LANは長距離引き回せる

のどちらかです。まず価格を見てみると、

10m

LAN: 4,800円（Amazon）: サンワサプライKB-T7-10NVN

HDMI: 2,200円（Amazon）: HORIC HDM100-886SV

30m

LAN: 9,700円（Amazon）: サンワサプライKB-T7-30NVN

HDMI: 9,500円（Amazon）: HORIC HDM300-008

50m

LAN: 17,700円（Amazon）: サンワサプライKB-T7-50NVN

HDMI: 14,000円（Amazon）: HORIC HDM500-275GD

HDMIケーブルは確かに高いけど、実はCAT7 LANケーブルもかなり高いため、大きな違いがありません。

次に距離を見てみると、HDMIも50mくらいならイコライザ付きのケーブルを使えば、引き回せるみたいです。さすがにケーブル1本で100mは無理そうでした。商品が見当たりません。HDMIで100mに挑むとすると、

• HDMIエクステンダ（送信、受信に2つ必要、1つ1万円くらい、電源も必要、LANケーブルも必要）で延長
• 光ファイバのHDMIケーブル（10万円くらい、電源必要）で接続

このような選択肢があるようです。HDMIで50mを超えることは不可能ではないですが、一気に価格が跳ね上がります。

従って、この製品が輝くシーンは
「50m〜100mのディスプレイ配線をケーブル1本で安く繋ぎたいとき」
だと思われます。たぶん。

メモ: 技術系の話はFacebookから転記しておくことにした。少し加筆。

家にたくさんマウスとキーボードがある

引っ越し荷物を開梱していると、たくさんのマウスとキーボードが出てきました。いつのまにこんなに買っていたのか。

我が家のマウスとキーボード

写真には6つのマウス、6つのキーボードが映っていますが、他にもマウス3つ（Logicool V450、Microsoft Wireless Mouse 1000が2つ）と、キーボード1つ（Topre REALFORCE）がありました。

マウスの一覧です。

• Logitech Optical Mouse USB M-UV96
• ELECOM EX-G Ultimate Laser Mouse M-XGL20DL(リンク)
• Logicool Wireless Mouse M510(リンク)
• Logicool Wireless Mouse M560(リンク)
• Logicool Cordless Laser Mouse MX1100(リンク)
• Logicool Marathon Mouse M705(リンク)
• Logicool Nono Cordless Laser Mouse V450(リンク)
• Microsoft Wireless Mouse 1000(リンク)

キーボードの一覧です。

• Ainex AKB-112A/WH(リンク)
• Owltech OWL-KB109STD(リンク)
• サンワサプライSKB-WL12SETBK(リンク)
• Logicool Wireless Keyboard K275(リンク)
• Logicool Wireless Keyboard K340(リンク)
• ニンテンドー ワイヤレスキーボード(リンク)
• Topre REALFORCE 108UBK(リンク、スペック表)

マウスの感想

マウスは9個も買ったにも関わらず、一番手に合うと思ったのは、会社のPCに付属している有線タイプのマウスでした。サイズが絶妙で、とても軽くて良いです。

ワイヤレスマウスは妙に小さいか、妙に重たいので、手が疲れてしまいます。今のところ唯一気に入ったのはLogicoolのM705だけです。

キーボードの感想

キーボードは7個も買いましたが、キーの配置がスタンダードであることだけが重要で、構造や他の要素はあまり気にならないことがわかりました。PCに付属しているキーボードはキー配置に捻りがなくて使いやすいものが多いですが、最近のPCは変なキー配置のキーボードが増えていて困ります。普通の配置が良いです。要らんことしないで欲しい。

前の会社（ソシオ）で使っていた富士通PCに付いてたキーボード（FKB-1424と配置が似ているやつ）はキーが若干頼りなかったですけど、キー配置が普通で良かったです。

今の会社のDELL KB216はイマイチです。左下のFnキーが邪魔ですし、左Altのところ（Zキーの一段下）にWinキーが来ていて、メチャクチャ押し間違えます。あまりに誤打するので撤去して、REALFORCEに置き換えたほどです。昔使っていたDELLマシンのキーボード（DELL SK8115？スペースキーが正方形のもの）はスタンダードな配置で良かったのにな〜。なんでノートPCもどきの配置にしたんでしょうね。

Logicoolのマウスは良いものが多いんですけど、キーボードはイマイチなキー配置が多いです。K275以外は誤打連発で手に合いません。

REALFORCEは価格は高いのを除けば、キー配置がスタンダードで非常に良いキーボードです。我が家では活躍の場がないため、会社に持って行って活躍してもらっています。

メモ: 技術系の話はFacebookから転記しておくことにした。10月13日の投稿が元だが、大幅に加筆した。

職業ダブってた

先日（2018年10月15日の日記参照）気づいたことですが、FacebookやLinkedInの職歴では、現職として2社以上に所属することができるようになっています。

エグゼクティブクラスなら複数の会社の取締役を兼任するだろうけど、正直言って自分には縁が無い機能だと思っていました。

しかしエグゼクティブでなくとも、この世には「出向」という2足の草鞋を履ける制度がある訳で。自分でこの機能を使うことになるとは思いませんでした……。

メモ: 技術系の話はFacebookから転記しておくことにした。