DataStoreの辛いところ

# DataStoreの限界 FacebookやインスタグラムのようなSNSで、投稿、公開範囲、お気に入りなどの機能をDataStoreで実現しようとするとどうしても辛くなる。 ## DataStoreで実現可能？ - users - id - feeds - id - user_id - favorites - user_id - feed_id - friends - user_id - follow_id が存在する ### 投稿が削除された場合、お気に入りから削除 favoritesからfeed_idの物を削除すればOK ### フォロー解除した場合、相互フォローのみの投稿をお気に入りから削除 アクセスユーザーとフォローしていたユーザーのお気に入り一覧から、公開範囲が相互フォローの投稿を取得して削除する。 この場合、favoritesにfeed情報を保持していないため、user_idで絞り込んだfeedを全部取得する必要がある。 DataStoreはfavoritesにfeedの構造体を保存できるが、feedが更新された場合にfavoritesのfeedまで更新しないといけないため現実的ではない。 # RDSで行う場合 同じデータ構造でOK ## 取得する場合に毎回joinして取得する select * from favorites fav inner join feeds on fav.feed_id=feeds.id left join friends on friends.user_id=feeds.user_id where fav.user_id=? and ( (feeds.enabled=有効) (feeds.publish_type=公開) or (feeds.publish_type=フォローワーのみ公開 and friends.user_id is null) or (feeds.user_id=自分) ) # まとめ DataStoreを使うってことは、前もってデータを作って置いてアクセスしやすい状態を担保するところでもある気がする。 更新のタイミングはデータの作り変えで複雑になるけど、検索はシンプルで良い。

Cloud Funcsionsを個別に呼び出す（リトライ処理）

# 概要

Cloud FunctionsをGCSに保存したタイミングで、画像データを変更してもう一度GCSにアップロードしたい。

## WebUIから実行

関数をテストから実行する

dataで必要なパラメータを指定。
今回はbucketとfileを使っていたのでその2つを指定する

以下は実際に読んでるコード

```
exports.helloWorld = (event, callback) => {
  const object = event.datat;
  console.log(`Bucket: ${object.bucket} File: ${object.name}`);
```

## コマンドラインからの実行

関数名、リージョンを指定して呼び出す

```
gcloud --project [PROJECT-NAME] beta functions call helloWorld --region asia-northeast1 --data '{"bucket":"hogehoge","name":foo.png"}'
```

Cloud Functionsを使ってImageMagickを使って画像変換してみる

JSからImageMagickを使う

nodeでImageMagickを使うライブラリがある

gm https://github.com/aheckmann/gm

こちらを使って行う

const gm = require("gm").subClass({ imageMagick: true });

gm('image.png')

  .colorspace("cmyk")

  .write('image.tif')

GCSからダウンロード

渡された引数にGCSのオブジェクトが渡されるのでそれを使ってダウンロードする

const object = event.data;

const file = storage.bucket(object.bucket).file(object.name);

const tempLocalPath = `/tmp/${path.parse(file.name).base}`;

file.download({ destination: tempLocalPath })

  .catch(err => {

    console.error("Failed to download file.", err);

    return Promise.reject(err);

  })

  .then(() => {

    console.log(`Image ${file.name} has been downloaded to ${tempLocalPath}.`);

  })

GCSへアップロード

ダウンロードの続きでbucketに対してuploadを行う

const newFileName = file.name.replace(".png", ".tif");

file.bucket

        .upload(tempLocalPath, {

          destination: newFileName,

          metadata: { contentType: "image/tiff" }

        })

        .catch(err => {

          console.error("Failed to upload cmyk image.", err);

          return Promise.reject(err);

        });

デプロイ

プロジェクトの指定

--project [PROJECT NAME]

regionの指定

--region asia-northeast1

デフォルトだとus-central1になる

実際のコマンドは以下

gcloud --project [PROJECT] beta functions deploy pngToCMYKConverter --region asia-northeast1 --trigger-resource sheet-yournail-staging --trigger-event google.storage.object.finalize

他のリージョンにDeployしてモジュールを削除

gcloud --project [PROJECT] beta functions deploy pngToCMYKConverter

参考
https://cloud.google.com/functions/docs/tutorials/imagemagick?hl=ja

.mitmproxyを使ってHTTPSの通信を確認

公式のドキュメント https://docs.mitmproxy.org/stable/ # install ## mac ``` $ brew install mitmproxy ``` ## iPhone ### 証明書 セキュアな通信を傍受するために、プロファイルのインストールを行う ``` http://mitm.it ``` その後、「設定」> 「一般」> 「情報」> 「証明書信頼設定」 "ルート証明書を全面的に信頼する"にチェックを入れる そうするとhttpsの通信も閲覧できるようになる <a href="https://4.bp.blogspot.com/-MC0JSRb9Q8g/WwV_urPvAyI/AAAAAAAAIto/SAxRr6LbLfIdLfhVSMEF5-1_nnCTo7RCACKgBGAs/s1600/IMG_0490.PNG" imageanchor="1" ><img border="0" src="https://4.bp.blogspot.com/-MC0JSRb9Q8g/WwV_urPvAyI/AAAAAAAAIto/SAxRr6LbLfIdLfhVSMEF5-1_nnCTo7RCACKgBGAs/s320/IMG_0490.PNG" width="148" height="320" data-original-width="739" data-original-height="1600" /></a> ### プロキシ設定 wifiのプロキシ設定で、PCのアドレス、port 8080にする # 使い方 ``` $ mitmproxy ``` ## Flows通信一覧が表示 ``` d 1行削除 z 全行削除 ```

Firebase Functionsの登録

Cloud Storageに保存した画像をCloud Functionsを使って、サムネイル画像を生成する # 公式ドキュメント https://firebase.google.com/docs/functions/gcp-storage-events?authuser=1 ## インストール ``` $ npm install -g firebase-tools # ブラウザが起動して認証する $ firebase login # 初期設定 $ firebase init or $ firebase init functions ``` ## ディレクトリ構成 ``` $ tree -L 2 . ├── firebase.json └── functions ├── index.js ├── node_modules └── package.json ``` ## 利用するパッケージを追加 ``` # Cloud Storage への再アップロード用 $ npm install --save @google-cloud/storage # 外部プロセス実行用 $ npm install --save child-process-promise ``` ## index.js ここの中身をそのままコピー https://github.com/firebase/functions-samples/blob/90ac6c8083122cedae19141f8ac8cb124ec8f321/quickstarts/thumbnails/functions/index.js#L60-L83 ## 特定のパケットをトリガーにする 特に指定しなければ、デフォルトのバケットが使われる コード上で指定できる ``` # デフォルトを使う場合 functions.storage.object() # 特定のバケットの場合 functions.storage.bucket('バケット名').object() ``` ## Deploy ``` $ firebase deploy --only functions ```

ReactNativeのリリース自動化、CodePush x CircleCI

# CodePushのアクセスキーを作成 ``` $ code-push access-key add "CircleCI" Successfully created the "CircleCI" access key: XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX Make sure to save this key value somewhere safe, since you won't be able to view it from the CLI again! ```

iOSシミュレータでURLスキームで起動する方法

URLスキームの実行方法

simctlがXcode6から付属しているのでそれを実行する

$ xcrun simctl openurl booted hoge:/foo/bar

simctl

シミュレータをコントロールできる

$ xcrun simctl

usage: simctl [--noxpc] [--set ] [--profiles ] ...

       simctl help [subcommand]

Command line utility to control the Simulator

For subcommands that require a argument, you may specify a device UDID

or the special "booted" string which will cause simctl to pick a booted device.

If multiple devices are booted when the "booted" device is selected, simctl

will choose one of them.

Subcommands:

        create              Create a new device.

        clone               Clone an existing device.

        upgrade             Upgrade a device to a newer runtime.

        delete              Delete a device or all unavailable devices.

        pair                Create a new watch and phone pair.

        unpair              Unpair a watch and phone pair.

        pair_activate       Set a given pair as active.

        erase               Erase a device's contents and settings.

        boot                Boot a device.

        shutdown            Shutdown a device.

        rename              Rename a device.

        getenv              Print an environment variable from a running device.

        openurl             Open a URL in a device.

        addmedia            Add photos, live photos, or videos to the photo library of a device.

        install             Install an app on a device.

        uninstall           Uninstall an app from a device.

        get_app_container   Print the path of the installed app's container

        launch              Launch an application by identifier on a device.

        terminate           Terminate an application by identifier on a device.

        spawn               Spawn a process on a device.

        list                List available devices, device types, runtimes, or device pairs.

        icloud_sync         Trigger iCloud sync on a device.

        pbsync              Sync the pasteboard content from one pasteboard to another.

        pbcopy              Copy standard input onto the device pasteboard.

        pbpaste             Print the contents of the device's pasteboard to standard output.

        help                Prints the usage for a given subcommand.

        io                  Set up a device IO operation.

        diagnose            Collect diagnostic information and logs.

        logverbose          enable or disable verbose logging for a device

デバイス確認

$ xcrun simctl list

== Device Types ==

iPhone 4s (com.apple.CoreSimulator.SimDeviceType.iPhone-4s)

iPhone 5 (com.apple.CoreSimulator.SimDeviceType.iPhone-5)

iPhone 5s (com.apple.CoreSimulator.SimDeviceType.iPhone-5s)

・・・

== Runtimes ==

iOS 9.3 (9.3 - 13E233) - com.apple.CoreSimulator.SimRuntime.iOS-9-3

iOS 10.3 (10.3.1 - 14E8301) - com.apple.CoreSimulator.SimRuntime.iOS-10-3

iOS 11.2 (11.2 - 15C107) - com.apple.CoreSimulator.SimRuntime.iOS-11-2

tvOS 11.2 (11.2 - 15K104) - com.apple.CoreSimulator.SimRuntime.tvOS-11-2

watchOS 4.2 (4.2 - 15S100) - com.apple.CoreSimulator.SimRuntime.watchOS-4-2

== Devices ==

-- iOS 9.3 --

    iPhone 4s (269EF856-87D0-41E1-B303-CE36A65E712E) (Shutdown)

    iPhone 5 (35804246-54E9-47BC-AFC2-83E639744F7B) (Shutdown)

    iPhone 5s (AFAA2A65-FB92-441B-820F-CE7C97BE6AF1) (Shutdown)

    iPhone 6 (98529E42-EE5A-404F-B476-27C61737AD12) (Shutdown)

・・・

-- iOS 11.2 --

    iPhone 5s (A698838A-704E-43C6-AE8B-1E81AB0E1311) (Shutdown)

    iPhone 6 (6412A351-97A7-49A1-B860-A51EDB631C48) (Booted)

    iPhone 6 Plus (8AD29BA9-06A5-4036-BA95-477D05FE30AB) (Shutdown)

    iPhone 6s (6048B53E-87FF-429C-A5A1-5BE62CB8C2F4) (Shutdown)

Open URL

$ xcrun simctl openurl

Usage: simctl openurl

deviceとURLを指定する

deviceは先ほどしらべたUUIDでも良いし、bootedと指定しても良い