---
title: ネガティブ！ポジティブ！ニュートラル？  Snowflakeの外部関数×Amazon Comprehendで感情分析してみた
description: ネガティブ！ポジティブ！ニュートラル？  Snowflakeの外部関数×Amazon Comprehendで感情分析してみた
image: https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-17-2021-07-33-33-52-AM.png
---

![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png)

![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png)

[![お問い合わせ](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/c64a7bb0-e32a-499b-851b-b4e7a66da275.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/c64a7bb0-e32a-499b-851b-b4e7a66da275)

<https://knowledge.insight-lab.co.jp/snowflake/snowflake-external-function-nlp-sentiment#tmpmodule_159357067471898>

- [Snowflakeとは](https://service.insight-lab.co.jp/snowflake)
- [SNOWFLAKEナレッジ](https://knowledge.insight-lab.co.jp/snowflake)
- [お役立ち資料](https://download.insight-lab.co.jp/snowflake/download)

###### 11 分で読むことができます

# [ネガティブ！ポジティブ！ニュートラル？  Snowflakeの外部関数×Amazon Comprehendで感情分析してみた](https://knowledge.insight-lab.co.jp/snowflake/snowflake-external-function-nlp-sentiment)

 執筆者 [BI LAB編集室](https://knowledge.insight-lab.co.jp/snowflake/author/bi-lab) 更新日時 2021年12月18日

###### Topics: [NLP](https://knowledge.insight-lab.co.jp/snowflake/tag/nlp) [AWS](https://knowledge.insight-lab.co.jp/snowflake/tag/aws) [snowflake](https://knowledge.insight-lab.co.jp/snowflake/tag/snowflake) [lambda](https://knowledge.insight-lab.co.jp/snowflake/tag/lambda) [API連携](https://knowledge.insight-lab.co.jp/snowflake/tag/api連携) [Comprehend](https://knowledge.insight-lab.co.jp/snowflake/tag/comprehend)

![ネガティブ！ポジティブ！ニュートラル？  Snowflakeの外部関数×Amazon Comprehendで感情分析してみた](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-17-2021-07-33-33-52-AM.png)

 目次

今回は、Snowflakeの外部関数とAWSのNLPサービス、  
Amazon Comprehendを用いて、  
Snowflake上で手軽に感情分析（いわゆるネガポジ判定）をできるようにします！

調査したところ先駆者がいましたので、  
下記2つの記事を参考に少々アレンジして実装してみました。

- [Snowflake external functions, Part 1 – Hello World tutorial for triggering AWS Lambda](https://data.solita.fi/snowflake-external-functions-tutorial-for-aws-lambda/)
- [Snowflake external functions, Part 2 – How to do Natural Language Processing and analyze product reviews stored in Snowflake](https://data.solita.fi/snowflake-external-functions-part-2-how-to-do-natural-language-processing-and-analyze-product-reviews-stored-in-snowflake/)

ちなみに…  
今年の8月に登壇したSnowVillage YouTube Liveでは  
本記事の内容を一部実演しております。  
お時間のある方はぜひご覧ください！

目指せ10000000000000000000000回再生!!

 

## 外部関数とは？

外部関数（External Function）とは、  
Snowflakeから外部サービス上のコードを実行する機能です。

例えばAWS Lambda上のPythonコードを  
あたかもSnowflakeの関数のように実行することができます。

![](https://lh5.googleusercontent.com/sc9Hh_eooekt2Sbl4Htxag1FLdwTJGZzpKBsh66F_5flDMypSZexuhbD_sDHQe2fu0Xm6VdMMp6o8ZFW38IEPdprQMAo5hUJRHpjHZI_a-hV_23vA1BbZEzPZE0hjJ23o1QLd0M)

※詳細はSnowflake公式ドキュメント [外部関数の紹介](https://docs.snowflake.com/ja/sql-reference/external-functions-introduction.html) <https://docs.snowflake.com/ja/sql-reference/external-functions-introduction.html>をご確認ください。

 

## Amazon Comprehendとは？

Amazon Comprehendとは、  
機械学習を使用してテキストからインサイトを見つける自然言語処理 (NLP) サービスです。

![](https://lh6.googleusercontent.com/Fzm7vm9f6u7UgnSAUKDKlojkLFyMpDSWmsUeUSat3S3A0LxAkuK1Own-EChvuoTydaoTLSdRHQL0OBx4EZyeoez8DdDOVPU5ZYtTLOtE7D0E1gy3J-GmiM6QcDXdsyUysQn2yOs)

下記のような特徴があります。

- テキストから感情分析（ネガポジ判定）やキーフレーズ抽出が可能
- フルマネージド型のため、一から学習させてモデルを構築する必要がない
- APIが用意されているため、各プログラミング言語から実行可能

※詳細はAWS公式HP [Amazon Comprehend の特徴](https://aws.amazon.com/jp/comprehend/features/) をご確認ください。

 

## 構成図

今回実装する構成は下記の通りです。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-17-2021-07-33-33-52-AM.png)

SnowflakeからテキストをAPI Gateway経由で送り、  
LambdaでComprehendのAPIを叩き、  
感情分析した結果をAPI Gateway経由でSnowflakeに返す  
…といった流れです。

 

## 実装してみよう

では実装を始めます！

AWSとSnowflakeのアカウントは  
持っている前提で進めますので予めご留意ください。

### 1. AWS LambdaでAmazon Comprehendと連携する関数を作成

AWS Lambdaコンソールを開き、任意の名称でPythonの関数を作成します。  
設定は下記の通り。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-16-05-74-PM.png)

 

下記のコードをCopy&Pasteし、Deploy します。

 

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-17-39-05-PM.png)

言語コードとテキストを引数として受け取り、  
Comprehendの[DetectSentiment](https://docs.aws.amazon.com/ja_jp/comprehend/latest/dg/API_DetectSentiment.html)で感情分析した結果を返す処理を組んでいます。

 

Lambdaはデフォルトのタイムアウトが3秒と短いので、  
設定 > 一般設定 > 編集 から最大の 15分 に変更しておきましょう。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-41-28-32-PM.png)

 

続いてLambdaの実行ロールにComprehendへの  
アクセス権限を付与する必要があるため、  
アクセス権限 > ロール名 をクリックします。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-41-12-80-PM.png)

 

IAMロールのコンソールが開きます。  
ポリシーをアタッチします をクリックし、

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-17-56-17-PM.png)

 

ComprehendFullAccess を選択して   
ポリシーのアタッチ をクリックすると、

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-18-15-72-PM.png)

一覧に反映されます。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-18-29-66-PM.png)

これでAWS Lambdaの設定は完了です。

 

### 2. Snowflake認証用IAMロールを作成

後ほどSnowflake側のIAMを今作業中のAWS側に認証させる必要があるため、  
事前にIAMロールを作成する必要があります。

IAMコンソールを開き、ロールを作成 をクリックします。

 

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-20-12-95-PM.png)

 

別のAWSアカウント を選択し、  
Lambda作成時と同一のAWSの アカウントID を設定します。

次のステップ 以降は特に何も設定しないで良いので、  
最後の確認ページまで進めましょう。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-20-26-14-PM.png)

 

確認ページでは任意の ロール名 を入力して ロールの作成 を終えます。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-20-42-89-PM.png)

ロール名は後で使用するのでメモしておきましょう！

 

### 3. Amazon API GatewayでAPIを作成

REST APIを作成します。

Amazon API Gateway コンソールを開き、  
APIを作成 > REST APIの 構築 をクリックします。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-21-13-01-PM.png)

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-21-41-36-PM.png)

 

REST 、新しいAPI にチェックし、  
任意の API名 を入力し、APIの作成 をクリックします。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-21-55-56-PM.png)

 

リソース > アクション > メソッドの作成 を行い、

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-22-39-67-PM.png)

 

POST を選択します。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-23-00-81-PM.png)

 

セットアップ画面が表示されるので、  
Lambda関数 と Lambdaプロキシ統合の使用 にチェックし、  
先ほど作成した Lambda関数 をセットし、保存 します。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-23-34-98-PM.png)

 

確認画面が表示されますが、OK です！

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-24-17-45-PM.png)

 

APIをデプロイします。  
リソース > アクション > APIのデプロイ をクリックし、

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-24-34-85-PM.png)

 

任意の ステージ名 を入力したら デプロイ します。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-25-17-94-PM.png)

 

デプロイ完了したらAPI呼び出し用URLが表示されるのでメモしておきます。

![](https://knowledge.insight-lab.co.jp/hubfs/undefined.png)

 

リソース に戻り、メソッドリクエストの ARN をメモしたら メソッドリクエスト をクリックします。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-26-48-96-PM.png)

 

認可 を AWS IAM にして ✔ します。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-14-2021-02-27-04-63-PM.png)

 

続いて左下の リソースポリシー を開き、下記のコードをCopy&Pasteします。

 

※下記の値は置換して下さい。

- <12-digit-number>  → AWSのアカウントID
- <external-function-role> → メモしたSnowflake認証用のIAMロール名
- <method-request-arn> → メモしたメソッドリクエストのARN

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-07-00-17-63-AM.png)

これでREST APIの作成は完了です。

 

### 4. SnowflakeでAPI統合を作成

ここでようやくSnowflakeのコンソールを開きます！  
まずは [公式ドキュメント](https://docs.snowflake.com/ja/sql-reference/sql/create-api-integration.html)を参考に、API統合を作成します。

下記SQLをSnowflakeのワークシートにCopy&Pasteして実行してください。

※下記の値は置換して下さい。

- <api-integration-name>  → 任意のAPI統合名
- <external-function-role-arn> → メモしたSnowflake認証用のIAMロール名
- <api-url> → メモしたAPI呼び出し用URL

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-15-2021-01-01-08-71-PM.png)

正常に作成されました と表示されたらOKです！  
※正常に作成できない場合は作業中のロールにAPI統合の権限が付与されていない可能性がありますので、設定を見直してください。

 

続いて、DESCRIBE INTEGRATION <api-integration-name>; を実行し、API統合の詳細情報を表示します。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-15-2021-01-09-00-84-PM.png)

API\_AWS\_IAM\_USER\_ARN と API\_AWS\_EXTERNAL\_ID の値（property\_value）をメモして下さい。次のステップで使用します。

 

### 5. Snowflake認証用IAMロールの信頼関係を編集

AWSに戻り、3. Amazon API GatewayでAPIを作成 にて作成したIAMロールをIAMコンソールから開きます。

信頼関係 タブから 信頼関係の編集 をクリックします。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-15-2021-01-18-47-24-PM.png)

 

デフォルトで下記のような値が入っていると思います。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-01-07-41-60-PM.png)

赤枠の中身を、先ほどSnowflake側でメモした値に書き換えて下さい。

- ① → "" の中に API\_AWS\_IAM\_USER\_ARN の値 を入れる
- ② → {} の中に "StringEquals": { "sts:ExternalId": "API\_AWS\_EXTERNAL\_ID の値" } を入れる

下記のようなイメージです。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-15-2021-01-34-11-53-PM.png)  
編集を終えたら、信頼ポリシーの更新 をクリックします。

これで外部関数を作成するための準備が完了しました！

 

### 6. Snowflakeで外部関数を作成

Snowflakeに戻り、外部関数を作成します。

下記SQLをSnowflakeのワークシートにCopy&Pasteして実行してください。  
引数はLambda関数に合わせて2つ定義しています。

 

※下記の値は置換して下さい。

- <external-function-name> → 任意の外部関数名
- <api-integration-name> → 先程作成したAPI統合名
- <api-url> → メモしたAPI呼び出し用URL

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-22-31-57-PM.png)

正常に作成されました と表示されたらOKです！

 

### 7. Let's ネガポジ祭

いよいよ外部関数の動作検証をします！  
有効なパラメータは[DetectSentiment](https://docs.aws.amazon.com/ja_jp/comprehend/latest/dg/API_DetectSentiment.html)を確認しておきましょう。

まずは日本語でネガティブっぽいテキストを入れて実行してみます。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-25-54-22-PM.png)

結果はJSONで返ってきますので、クリックすると…

↓

↓

↓

 

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-28-12-25-PM.png)

ネガティブ！

 

続いて英語でポジティブっぽいテキストを入れて実行してみます。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-36-17-35-PM.png)

 ↓

 

↓

 

↓

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-37-29-30-PM.png)

ポジティブ！

 

最後にアラビア語でニュートラルっぽいテキストを入れて実行してみます。

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-55-59-32-PM.png)

↓

 

↓

 

↓

 

![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Dec-16-2021-02-58-19-75-PM.png)

ニュートラル！

完璧ですね。 

 

## 注意点

外部関数はAPI Gatewayを通過する仕様のため、[API Gatewayの制限](https://docs.aws.amazon.com/ja_jp/apigateway/latest/developerguide/limits.html)に縛られます。  
例えばAPI Gatewayの最大ペイロードサイズは10MBのため、大量データの処理には向いていないといえます。ご注意ください！

## 最後に

いかがでしたでしょうか。

実装自体は結構ハードでしたが、  
一度作ってしまえば気軽に試せる汎用性の高い関数になったと思います。

また、Amazon Comprehendは感情分析以外にも[様々な機能](https://aws.amazon.com/jp/comprehend/features/)が存在するので、  
自信のある方はキーフレーズ抽出やエンティティ認識ができる外部関数の実装も試してみて下さい！

ちなみに…  
序盤にご紹介しました[SnowVillage YouTube Live](https://www.youtube.com/watch?v=R3mHZrSJoGw)では  
Twitterのデータからあの有名な〇〇さんの感情を分析し、  
BIツールで可視化まで行っています！

この記事を見てご興味を持った方はぜひYouTubeもご覧下さい！

Snowflakeを体験してみませんか？

INSIGHT LABではSnowflake紹介セミナーを定期開催しています。Snowflakeの製品紹介だけでなく、デモンストレーションを通してSnowflakeのシンプルなUI操作や処理パフォーマンスの高さを体感いただけます。

[![詳細はこちら](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/0d0b0d86-fdb7-4351-ab14-d482c854defc.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/0d0b0d86-fdb7-4351-ab14-d482c854defc)

- [Tweet](https://twitter.com/share)

![BI LAB編集室](https://knowledge.insight-lab.co.jp/hubfs/image%20(3)-3.png)

#### 執筆者 [BI LAB編集室](https://knowledge.insight-lab.co.jp/snowflake/author/bi-lab)

BI LAB（データ活用研究所）編集室です。 BI、AI、DWHなどデータ活用に関するトレンドやニュースやコラムをほぼ毎日配信しています。押さえておきたい基本知識から、最新ニュース、事例インタビューやお役立ち情報・セミナーレポートまで、データ活用の専門家ならではの視点と情報量でお届けします。

###### [前の投稿](https://knowledge.insight-lab.co.jp/snowflake/collation-0)

[![](https://knowledge.insight-lab.co.jp/hubfs/%E3%82%AD%E3%83%BC%E3%83%93%E3%82%B8%E3%83%A5%E3%82%A2%E3%83%AB.jpg)](https://knowledge.insight-lab.co.jp/snowflake/collation-0)

###### [【小ネタ】Snowflakeの照合順序をCOLLATE関数を使って検証してみた](https://knowledge.insight-lab.co.jp/snowflake/collation-0)

###### [次の投稿](https://knowledge.insight-lab.co.jp/snowflake/python_snowflake_get_object_references)

[![](https://knowledge.insight-lab.co.jp/hubfs/Snowflake/Shiratori/character_program_fast.png)](https://knowledge.insight-lab.co.jp/snowflake/python_snowflake_get_object_references)

###### [PythonでSnowflakeのGET\_OBJECT\_REFERENCES関数を物理テーブル化する](https://knowledge.insight-lab.co.jp/snowflake/python_snowflake_get_object_references)

RECOMMEND こちらの記事も人気です。

<https://knowledge.insight-lab.co.jp/snowflake/pricing>

###### 4 分で読むことができます。

##### [Snowflakeの料金体系｜クレジットと費用最適化のポイントをご紹介](https://knowledge.insight-lab.co.jp/snowflake/pricing)

###### 2021年 6月 28日

<https://knowledge.insight-lab.co.jp/snowflake/dbt-data-pipeline>

###### 12 分で読むことができます。

##### [【Snowflake×dbt】データパイプライン構築](https://knowledge.insight-lab.co.jp/snowflake/dbt-data-pipeline)

###### 2022年 6月 17日

<https://knowledge.insight-lab.co.jp/snowflake/snowflake-vs-treasuredata>

###### 5 分で読むことができます。

##### [【禁断の比較？】SnowflakeとTreasure Dataを比べてみました](https://knowledge.insight-lab.co.jp/snowflake/snowflake-vs-treasuredata)

###### 2021年 5月 24日

<https://knowledge.insight-lab.co.jp/snowflake/snowsight-executive-dashboard>

###### 1 分で読むことができます。

##### [Snowsightでどこまでできるか！？限界に挑戦！](https://knowledge.insight-lab.co.jp/snowflake/snowsight-executive-dashboard)

###### 2023年 12月 14日

<https://knowledge.insight-lab.co.jp/snowflake/-snowflake-streamlit-in-snowflake-introduce>

###### 5 分で読むことができます。

##### [【Snowflake】新機能「Streamlit in Snowflake」とは何者か！？](https://knowledge.insight-lab.co.jp/snowflake/-snowflake-streamlit-in-snowflake-introduce)

###### 2023年 9月 21日

<https://knowledge.insight-lab.co.jp/snowflake/-snowflake-rag-prototype>

###### 11 分で読むことができます。

##### [【Snowflake】SQLと標準関数のみでRAGシステムをサクッと構築（プロトタイプ編）](https://knowledge.insight-lab.co.jp/snowflake/-snowflake-rag-prototype)

###### 2024年 5月 28日

##### 運営会社

運営会社

- [会社概要](https://insight-lab.co.jp/about/)
- [お問い合わせ](https://contact.insight-lab.co.jp/main)

##### メニュー

メニュー

- [Snowflakeとは](https://service.insight-lab.co.jp/snowflake)
- [Snowflakeナレッジ](https://knowledge.insight-lab.co.jp/snowflake)
- [お役立ち資料](https://download.insight-lab.co.jp/snowflake/download)

[![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=200&height=55&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png "INSIGHT LAB")](https://www.insight-lab.co.jp/)

- [プライバシーポリシー](https://www.insight-lab.co.jp/privacy.html)

Copyright © 2020 INSIGHT LAB, Inc.

<https://twitter.com/INSIGHTLAB_INC><https://www.youtube.com/channel/UCOKNKiO4uuza4NioSZpBMhg>