C#でLINE botを作ってみた

ちょっと現実から逃避していて調べものをしていた時に、サクッと作れたのでご紹介。

LINE側の準備

• LINEビジネスセンターより「Messaging API」を選択 business.line.me

「Developer Trialを始める」を選択

会社・事業者を作成して選択（とりあえず法人で作ってしまったけどいいのかな？）

アカウント名・業種を決めて「確認する」を選択

内容を確認して「申し込む」を選択

「LINE@MANAGER」へを選択

LINE@MANAGERの画面が表示されるので、「Bot設定」の「APIを利用する」をクリック

確認ダイアログで「確認」をクリック

「Bot設定」でBot用に設定を変更して「保存」をクリック

• 受信したメッセージをこちらで用意するサーバで処理したいのでので「Webhook送信」は「利用する」に変更

• 応答メッセージをこちらで作成するので「自動応答メッセージ」は「利用しない」に変更

• 「Botのグループトーク参加」「友だち追加時あいさつ」はお好みで

「Bot設定」の「LINE Developersで設定する」をクリックする

• 「Channel Secret」の右の「Show」をクリックして、表示される内容をメモっておく（API側で使います）

• 画面一番下の「Channel Access Token」の右の「ISSUE」をクリックして、表示される内容をメモっておく（API側で使います）

LINEの準備はとりあえずここまで

アプリ側の作業

Messaging API はC#のライブラリが無いのですが、Kenichiro NakamuraさんによりSDKとテンプレートが作成されています。

C# で LINE Bot | Ken’s Tech Blog

基本これを入れるだけでそのまま動く物が出来てしまいます。すごいよ・・・( ﾟДﾟ)

• LINE Bot Applicationテンプレートをダウンロード

Release Line Bot Application · kenakamu/line-bot-sdk-csharp · GitHub

• %USERPROFILE%\Documents\Visual Studio 2015\Templates\ProjectTemplates\Visual C#\ にzipをそのまま保存

• Visual Studio 2015起動

• 新しいプロジェクトの作成画面に「Line Bot Application」が追加されているので、それを選択して作成

• Web.configの「ChannelSecret」と「ChannelToken」に先ほどメモった内容を記載

• プロジェクトを右クリックして「公開」を選択

• 「App Servce」画面で既に利用可能なリソースがあるのであればそれを選択、今回は「新規作成」を選択

• Web Appの名前、サブスクリプション、リソース、App Serviceのプラン（無料でOK）を指定して「作成」を選択

• そのまま「発行」を選択

• 発行されたURLをメモっておく

LINE側の設定

もうちょっとです。

• LINEビジネスセンターより「アカウントリスト」を選択

LINE Business Center

• 作成したBotが表示されていると思うのでMessaging API右の「LINE Developers」をクリックする

• 準備の時に表示した設定画面が表示されるので画面下の「EDIT」をクリックする

• 編集画面が表示されるので「Webhook URL」に先ほどメモったURLを貼り付けて、プロトコルをhttpsに変更し、URLの後ろに/api/linemessageを付けて「SAVE」をクリックして保存する
  ※VERIFYはうまくいかないけど無視(笑)

これでOK

動作確認

今使っていた「LINE Developers」設定画面にあるQRコードから、LINEへ友だち追加して実際に動作を確認します。

来た物をそのまま返すサンプルになっています。
Button、Confirm、CasouselのTemplate messageのサンプルも含まれています。

LINEの設定に多少手間取るかもしれませんが、アプリ部分はテンプレートそのままでOKです。 こんな素晴らしいSDKとテンプレートを公開して頂いているKenichiro Nakamuraさんに感謝ですね(･ω･)

Xamarin.Forms XAMLのIntellisenseをとりあえず有効にする方法

Xamarinの開発環境を再構築していたところ 以下の記事で紹介していた拡張機能がなくなっていました・・・(･ω･`)

tonkun-no.hatenablog.com

またエアXAMLに戻ってしまうのは辛いので、 暫定的にIntellisenseを有効にしてみます。

なぜかテキストエディタで開くと、Intellisenseが聞くので、 レジストリを編集して常にテキストエディタで開くようにしてみます。

以下のレジストリを編集します。

HKEY_CURRENT_USER\SOFTWARE\Microsoft\VisualStudio\14.0_Config \XmlChooserFactory\XamarinForms

※VisualStudio2015環境の場合です

内容については、この辺りを参考にしました。
Visual Studio Editor Choosing System – Microsoft XML Team's WebLog

設定する値ですが、
{7651A701-06E5-11D1-8EBD-00A0C90F26EA}の値を
{FA3CD31E-987B-443A-9B81-186104E8DAC1}
から
{8B382828-6202-11d1-8870-0000F87579D2}
に変更しています。

設定するテキストエディタのGUIDはこちらを参考にしました。
https://msdn.microsoft.com/ja-jp/library/bb166496.aspx

変更後のレジストリ

めでたくIntellisenseが有効になりました。

今回はコード表示の場合のみ変更しています。
まっさらな環境を持っていないので、今回修正したレジストリが最初からあるのかどうかちょっと不明ですが参考になれば(･ω･)ﾉ

Xamarin.Android Cognitive Service Face APIを使って顔認証をしてみた

qiita.com

の9日目の記事になります。

前回準備したFace APIを使ったなんちゃってログインのような処理を作ってみようと思います。

tonkun-no.hatenablog.com

処理の流れとしては

1. カメラのプレビューから顔を検出

2. プレビューから顔の画像を取得
   →どうしてもプレビューから画像の取得が出来なかったので、写真を撮影する方法に変更しています・・・orz

3. 取得した画像をFace APIを使用して顔を検出

4. 検出した顔に対してあらかじめ用意した顔リストから類似する顔を検出

5. 検出できたら認証成功

6. 認証に成功したら次の画面に移動

と言った感じです。

プロジェクト構成

Xamarin.Androidで作成します。 プロジェクトの構成としては、以下の通り

AndroidプロジェクトとPCLプロジェクトの2つです。

実装

Face API周りの準備から。

NuGetからMicrosoft.ProjectOxford.FaceをPCLプロジェクトにインストール

実際に顔認証をしている処理としては

FaceServiceClient _faceServiceClient = new FaceServiceClient("your subscription key");
private async Task<SimilarPersistedFace[]> GetSimilarFaces(Stream imageStream)
{
    try
    {
        // 顔を検出
        var faces = await _faceServiceClient.DetectAsync(imageStream);
        // 検出した顔がリストにあるか検索(1件のみ抽出)
        return await _faceServiceClient.FindSimilarAsync(faces.FirstOrDefault().FaceId, _faceListId, candidatesCount);
    }
    catch (FaceAPIException)
    {
        // 何かしらエラー
        return new SimilarPersistedFace[0];
    }
}

と
DetectAsyncをして、撮った画像から顔を検出して、
FindSimilarAsyncでFaceListに同じ顔があるか検索して結果を返しているだけでOK。
超簡単です。

APIの使い方はこちらを参考にしました。
Microsoft Cognitive Services

今回FaceListはあらかじめ作成しています。
同じくAPIが用意されているので、そちらを使えばサクッと作れると思います。*1

カメラ側のでの顔検出はGooglePlayServices.Visionを使います。
以前に書いた記事の機能をベースにしています。
tonkun-no.hatenablog.com

顔を検出したタイミングで写真を撮影して、 そのコールバック処理で、先ほど準備したFace APIを使用して認証を行っています。 成功した場合は次の画面へ移動、失敗した場合はそのままになっています。

ソースはGithubに上がっているので、詳しくはそちらを見てみてください。

github.com

実行

実行してみると、カメラのプレビューで顔を検出したタイミングで認証が行われ、 FaceListに登録した顔と似ていると判定されれば、認証成功として次の画面へ移動できました。

カメラの顔検出がかなり早いので、撮影のタイミングによっては認証に失敗したりと、 何だかちょっとイマイチな動作ですが・・・そこはまぁ(･ω･`)

Face APIを使って、こんなに簡単に顔の検出等が出来るのはいいですね。 他のAPIも試してみたいと思います。

*1:CreateFaceListAsyncとAddFaceToFaceListAsyncを使用します

Cognitive Service Face APIを試してみる（準備編）

Microsoft AzureのCognitive Service Face APIを使ってみようと思います。
今回は準備編です。

Face APIの準備

Azureにログイン
Microsoft Azure: クラウド コンピューティング プラットフォームとサービス

ダッシュボードから新規で「Cognitive Services APIs」を検索し、

「作成」をクリック

Account nameを記入し、サブスクリプションを選択、API typeから「Face API」を選択

場所は「米国西部」しか現時点では選べないのでそのまま、Pricing tierは「F0 Free」を選択

Resource groupはとりあえず新規作成で、Legal termsで「I Agree」を選択

ダッシュボードにピン留めするにチェックをして「作成」をクリック

しばし待ちましょう・・・( ﾟДﾟ)

作成が完了したら、KeysからKEY1をコピーしておきます

Azure側の準備はこれでOKです。

Xamarin.Forms Visual StudioでXAMLファイルの編集をもうちょっと便利にしたい

最近Xamarin.Formsを勉強していますが、 サンプルとかに書いてあるXAMLファイルを手書きしようとすると

イケテるパターン

イケテないパターン

Visual StudioさんIntellisenseが働いてくれないorz
コレジャナイ感が、もっとサクサク書きたいんです・・・

Twitterでつぶやいてみたことろ、

Xamarin formsのXAML編集ってみんな実際どうやってるんだろうbyVisualStudio
Layout配下なんてIntellisense効かないよね・・・？

— tonkun (@tonkun_no) November 11, 2016

頂いた回答としては

• ReSharper

• VSの拡張機能に拡張機能があるらしい

• エアーXAML(！？)

などの回答を頂きました。 ReSharperは超便利そうですが、有償なのでちと保留 エアーXAMLの境地に行くにはまだまだ修行（写経）が必要ですので、 拡張機能に何やらそれっぽい物があるそうなので試しに使ってみました。

ポチっと

インストール

１行目の色がこれまでと変わっています。

おぉっ( ﾟДﾟ)

スバラシイ( ;∀;)

拡張機能を入れても１行目の色が変わらない場合がありました。

一度、対象のXAMLファイルを閉じて、再度開くと直るかもしれません。

これで画面書くのも捗りますね(･ω･)b

XAML Previewer for Xamarin.Formsが動いてくれない（Windows単独）

2017/03/21追記 単独でも動作するようになっていました。 tonkun-no.hatenablog.com

昨日の夜TLを見ていると

WOW!!!!! @xamarinhq Forms VS Previewer in VS now! pic.twitter.com/EPBHGWkOMc

— Karl Shifflett (MVP) (@kdawg02) 2016年10月29日

どうやらVisualStudioで使えるとの事なので試してみていましたが、どうにも動きません。 「Android Phoneの文字のみ」

nuitsさんによると「Alpha」にすると動作するらしいので、今晩やってみようと思っていたら・・・

はてなブログに投稿しました #Xamarin #JXUG #はてなブログ
【Xamarin】速報！Ｘａｍａｒｉｎ．Ｆｏｒｍｓ（XAML） Previewer for Visual St…https://t.co/161R8qQhlV pic.twitter.com/0nsyA23MF5

— nuits.jp (@nuits_jp) 2016年10月30日

どうやら「Stable」でも動作する模様（汗）

StableバージョンのXamarin for VSで動作した為、記事を訂正しました #Xamarin #JXUG #はてなブログ
【Xamarin】速報！Xamarin.Forms（…https://t.co/161R8qQhlV pic.twitter.com/5uapunAZB1

— nuits.jp (@nuits_jp) 2016年10月30日

フォーラムでそれらしいのが無いか探したところ

Prerelease & Betas — Xamarin Forums

以下に同じような話はありましたが、解決できていません

• Macとの接続がないと表示されない
• 64bit版のJDKを入れて、そちらを参照するようにする
  →1.7.0_79と1.7.0_80を入れてみましたが、結果変わらず

Xamarin Forms Previewer isn't showing — Xamarin Forums

以下、こちらの環境情報です。

隠れていますが、Android NDKは「r10e」です。

VisualStudio単独で表示できた方、ぜひ教えて下さい。

11/14追記 どうやらまだ単独では動かない模様

Xamarin Forms Previewer isn't showing - Page 2 — Xamarin Forums

We are actively working on enabling the Android preview when there is no active connection to the Mac build host. This was an oversight which we’re rectifying now.

とか書いてあるし・・・orz

Xamarin.Android Google Play Services Visionを使ってみた（顔認識）

前回からだいぶ時間が経ってしまいましたが、

tonkun-no.hatenablog.com

今回は顔認識を試してみました。

殆ど、サンプル通りに作っていますが、ソースはGitHubにあります。

XamarinSamples/VisionFacesSample.Android at master · tonkun-no/XamarinSamples · GitHub

インストールや設定等は前回と同じです。

FaceTrackerActivity(抜粋)

protected override void OnCreate(Bundle bundle)
{
    base.OnCreate(bundle);
    SetContentView(Resource.Layout.FaceTracker);
    _cameraSourcePreview = FindViewById<CameraSourcePreview>(Resource.Id.cameraSourcePreview);
    _overlay = FindViewById<GraphicOverlay>(Resource.Id.faceOverlay);
    var detector = new FaceDetector.Builder(Application.Context)
        //.SetTrackingEnabled(false)
        .SetLandmarkType(LandmarkDetectionType.All)
        .SetMode(FaceDetectionMode.Accurate)
        .Build();
    detector.SetProcessor(
        new MultiProcessor.Builder(new FaceTrackerFactory(_overlay)).Build());

    _cameraSource = new CameraSource.Builder(this, detector)
        .SetAutoFocusEnabled(true)
        //.SetRequestedPreviewSize(640, 480)
        .SetFacing(CameraFacing.Front)
        .SetRequestedFps(30.0f)
        .Build();
}

今回は顔認識なのでFaceDetectorを使っています。

顔認識したタイミングでバーコードの時と同じようにTrackerクラスのOnNewItemメソッドが実行されています。
後はそのタイミングで、顔部分に表示するためのクラスを生成して、都度描画している感じです。

ビルドして実行すると、無事顔認識ができました。 カメラを横にするとプレビューサイズがおかしくなるのは、どこか間違ってるんだとは思いますが・・・ご容赦を。

本当にやってみたかった事はこの先なんですが、また出来たら書こうと思います。