--- title: 【Sisense Connector】Sisenseにインターネット上のCSVを自動取り込み-1 description: インターネット上で公開されているCSVファイルをいちいちダウンロードしてSisenseに取り込むなんて面倒ですよね。できれば勝手に最新のファイルをダウンロードしてきて、Sisenseに反映させたい。第１回めの今回はBitsadminコマンドを使用して、インターネットから自動的にCSVファイルをダウンロードする方法を解説します。 image: https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/02_sisense_csv-1024x428-1.png --- ![INSIGHT LAB_文字のみ_WHT-1](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png) ![INSIGHT LAB_文字のみ](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png) [![お問い合わせ](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/a4a0266e-14ad-4388-b83f-681a6f35b8a7.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/a4a0266e-14ad-4388-b83f-681a6f35b8a7) - [Sisenseとは](https://service.insight-lab.co.jp/sisense) - [Sisenseナレッジ](https://knowledge.insight-lab.co.jp/sisense) - [セミナー](https://event.insight-lab.co.jp/sisense-seminar) - [トレーニング](https://service.insight-lab.co.jp/data-analytics-dojo/training_course) - [お役立ち資料](https://download.insight-lab.co.jp/sisense/download) ###### 3 分で読むことができます。 # [【Sisense Connector】Sisenseにインターネット上のCSVを自動取り込み-1](https://knowledge.insight-lab.co.jp/sisense/data-modeling/connector/csv-bitsadmin) 執筆者 [Turtle](https://knowledge.insight-lab.co.jp/sisense/author/turtle) 更新日時 2020年10月16日 ###### Topics: [Connector](https://knowledge.insight-lab.co.jp/sisense/tag/connector) [Data Modeling](https://knowledge.insight-lab.co.jp/sisense/tag/data-modeling) ![【Connector】Sisenseにインターネット上のCSVを自動取り込み-1](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/02_sisense_csv-1024x428-1.png) 目次 シャローム！Sato-Gです。 6月2日に新型コロナの東京アラートが発動されて、僕のマンションから見える東京都庁のライトアップは赤になってしまった。 今回の東京アラートの発動はどうやら「夜の街」のせいということになっているようだ。 「夜の街」か... 類義語を調べると 歓楽街 ・ 盛り場 ・ ネオン街 ・ 繁華街 ・ ナイトスポット 「夜の街」という表現を使ったのは小池知事だったかな。 それ以来、ニュース・新聞報道でも「夜の街」という表現を使うようになった。 でも何か「夜の街」っていうと「しっぽり飲む」って感じがしない？ そう思うのは僕だけですか？ そういうニュアンスを含めて小池知事がこの言葉を使ったとすれば、かなりブンガク的だと思う。 実際、歌舞伎町のホストクラブでシャンパンの回しをした人たちのクラスター感染があるみたいだけどね。そういう人たちのせいで東京都全体がこうなっちゃうのはとても悲しい。 では本当に夜の街でそんなにも感染が起きているのか、夜の街の感染者はいつから増えだしたのか 興味あるよね。 では実データを使って実証していこう。 ## １.Google Sheetsのデータを取り込んでダッシュボードを作成してみる 前回はでSIGNATEさんで公開しているのGoogle SheetsからCOVID-19の感染者データを取り込んでみた。 これで毎日データが自動更新されるから最新の状況がわかるぞって思ったんだけど、実際表示してみるとこんな感じになった。 [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/01_signate-1024x480-1.png?width=1024&height=480&name=01_signate-1024x480-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/01_signate-1.png) 全然追いつけていない。ここ数日の数値は実態からはかけ離れたものだ。 SIGNATEさんのデータはかなりタイムラグがあるということがわかった。まあ、SIGNATEさんのデータはデータ分析を行うためのデータであり、分析に使える項目は多いから仕方ないよね。詳細な項目の値が確定しないと使えないから。 ## 2. COVID-19関連のデータ 現段階でわかっている限り、よく利用されるデータはこの２つのようだ。 **■ 東洋経済オンライン｜新型コロナウイルス国内感染の状況** 東洋経済オンライン編集部の荻原 和樹さんがかなり初期の段階から提供しているデータで **[東洋経済オンライン　新型コロナウイルス国内感染の状況](https://toyokeizai.net/sp/visual/tko/covid19/)**はCharts.jsを用いてとてもわかりやすいサイトになっている。この元データは**[GitHub](https://github.com/kaz-ogiwara/covid19/tree/master/data)**で公開されている。 **■ ジャッグジャパン｜都道府県別新型コロナウイルス感染者数マップ** **[ジャッグジャパンさんが公開しているサイト](https://gis.jag-japan.com/covid19jp/)**はArcGISを使用したポイントマップで感染者の地域分析ができる。こちらもかなり前からデータが公開されていて、DOMOが提供しているCOVID-19のダッシュボードもここのデータを活用している。データ形式はCSVなので扱いやすい。 上記の２つのうち、僕はジャッグジャパンさんのデータを使うことにした。東洋経済さんのデータはGitHubで公開されていて、明細データはJSON形式のため、自動化するのがやや面倒なのに対し、ジャッグジャパンさんのデータはURLを指定してCSV形式で容易にダウンロードが行えるからだ。 ## 3.インターネット上のCSVデータ取り込みの方法 ではさっそく、データを取り込んでいこう。 インターネット上のCSVファイルをURLで指定して自動でダウンロードするために次の３つのアプローチを行ってみる。 **▼ジャッグジャパンさんのCOVID-19データ** https://dl.dropboxusercontent.com/s/6mztoeb6xf78g5w/COVID-19.csv ・**SisenseのCSVコネクタで、パスの代わりにURLを指定して取り込む** ・**WindowsのBitsadminコマンドでバッチ化する** ・**CDataのCSVコネクタを使用する** ### 3.1 SisenseのCSVコネクタで取り込む ElastiCubeに取り込むデータの選択でCSVを選択する。 [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/02_sisense_csv-1024x428-1.png?width=1024&height=428&name=02_sisense_csv-1024x428-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/02_sisense_csv-1.png) 今回はファイルアップロードを行わず、Webサイトの決まった場所から取り込みたいので「Input Server Path」を選択する。 [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/03_path-1024x540-1.png?width=1024&height=540&name=03_path-1024x540-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/03_path-1.png) \[次へ\]をクリックして進もうとしたらアラートが出た。 [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/04_file-1024x537-1.png?width=1024&height=537&name=04_file-1024x537-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/04_file-Oct-07-2020-03-25-25-96-AM.png) 実はここまでは読みどおり... こんなことでできるわけないよなーとは思ってた。 ### 3.2 WindowsのBitsadminコマンドでダウンロードする 次なる手はWindowsの**Bitsadmin**コマンドで、指定したローカルフォルダにダウンロードするという方法。 さっそくやってみよう。 **Bitsadmin**コマンドでは以下のように指定する。 ``` bitsadmin /transfer download ＜URL＞ ＜保存先ファイル名＞ ``` コマンドプロンプトで以下のように指定して実行する。 **URL：**　https://dl.dropboxusercontent.com/s/6mztoeb6xf78g5w/COVID-19.csv **保存先ファイル名：**　c:\\data\\covid\_19.csv ``` bitsadmin /transfer download https://dl.dropboxusercontent.com/s/6mztoeb6xf78g5w/COVID-19.csv c:\data\covid_19.csv ``` [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/05_bitsadmin-1024x263-1.png?width=1024&height=263&name=05_bitsadmin-1024x263-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/05_bitsadmin-1.png) 実行すると進捗が表示された後、無事ダウンロードが完了した。 [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/06_bitsadmin_progress-1024x166-1.png?width=1024&height=166&name=06_bitsadmin_progress-1024x166-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/06_bitsadmin_progress-1.png) [![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/Imported_Blog_Media/07_bitsadmin_results-1024x155-1.png?width=1024&height=155&name=07_bitsadmin_results-1024x155-1.png)](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/07_bitsadmin_results-1.png) 何度か実行してみたが、ファイルは上書きしてくれるので、常に最新のファイルが所定のパスで格納されることがわかった。 これをバッチ化して、Windowsのタスクスケジューラーで決まった時刻に実行すればいい。 あとはCSVデータなのでなんとでも！ ## 4. まとめ Web上のCSVファイルをダウンロードしてElastiCubeにデータを取り込む方法として、WindowsコマンドのBitsadminを使う方法を解説した。 PSM.exeを使ってビルド自体もバッチ化してもいいかもしれない。 （参考：**[【Sisense PSM】AWSのS3連携～ビルドまでCLIで一括自動処理](https://knowledge.insight-lab.co.jp/sisense/data-modeling/s3-psm-cli)**） これはSisense KnowledgeじゃなくてWindows Knowledgeだね。 でも、実は上で参考として紹介したAWSのS3連携の記事はこのブログのTOP5に入る人気記事らしい。 うーん、レベル低っ 情けない Sisenseの記事だけで上位を占めるようにしないと。 そういう意味では次回はCDataのCSVコネクタを使用してデータを取り込んでみるので、正真正銘のSisense Knowledgeだ。 あ、CData Knowledgeと言わないでね^^; ではまた！ Sisenseを体験してみませんか？ INSIGHT LABではSisense紹介セミナーを定期開催しています。Sisenseの製品紹介や他BI製品との比較だけでなく、デモンストレーションを通してSisenseのシンプルな操作性やプレゼンテーション機能を体感いただけます。 [![詳細はこちら](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/ff8d86bf-1184-4d92-8926-6a31a20de4b0.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/ff8d86bf-1184-4d92-8926-6a31a20de4b0) - [Tweet](https://twitter.com/share) ![Turtle](https://knowledge.insight-lab.co.jp/hubfs/Sunflower.jpg) #### 執筆者 [Turtle](https://knowledge.insight-lab.co.jp/sisense/author/turtle) 可視化領域を中心とした業務に従事しています。 ###### [前の投稿](https://knowledge.insight-lab.co.jp/sisense/plug-in/tabber-switch-charts) [![【プラグイン】Tabberによるチャート切り替え](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/9ae1aa84f32eddb059a37876bc5c4bf6-2.png)](https://knowledge.insight-lab.co.jp/sisense/plug-in/tabber-switch-charts) ###### [【Sisense Plugin】Tabberによるチャート切り替え](https://knowledge.insight-lab.co.jp/sisense/plug-in/tabber-switch-charts) ###### [次の投稿](https://knowledge.insight-lab.co.jp/sisense/formula/percentile) [![【Formula】PERCENTILE関数で〇〇%ラインを算出する](https://knowledge.insight-lab.co.jp/hubfs/Imported_Blog_Media/6-1-1024x416-2.png)](https://knowledge.insight-lab.co.jp/sisense/formula/percentile) ###### [【Sisense Formula】PERCENTILE関数で〇〇%ラインを算出する](https://knowledge.insight-lab.co.jp/sisense/formula/percentile) RECOMMEND こちらの記事も人気です。 ###### 4 分で読むことができます。 #### [【Sisense Administaration】無料のSSL証明書"Let's Encrypt"でSSL化してみる](https://knowledge.insight-lab.co.jp/sisense/administration/ssl_lets_encrypt) ###### 2020年 10月 16日 ###### 8 分で読むことができます。 #### [【API連携】Spotify音楽データの分析①【Sisense】](https://knowledge.insight-lab.co.jp/sisense/information/spotify_music_data_1) ###### 2020年 10月 16日 ###### 2 分で読むことができます。 #### [【Sisense Widget】折れ線グラフを階段状に表示する](https://knowledge.insight-lab.co.jp/sisense/widget/step_line_chart) ###### 2020年 10月 16日 ###### 3 分で読むことができます。 #### [【Sisense Widget】Radar Chartを使ってポケモンの種族値を表示してみた](https://knowledge.insight-lab.co.jp/sisense/widget/radarchart) ###### 2020年 10月 16日 ###### 3 分で読むことができます。 #### [【Sisense Formula】CASE関数を使って条件分岐する](https://knowledge.insight-lab.co.jp/sisense/formula/case) ###### 2020年 10月 16日 ###### 3 分で読むことができます。 #### [【Sisense Widget】折れ線グラフにおける欠落値の対処法](https://knowledge.insight-lab.co.jp/sisense/widget/line-graph) ###### 2020年 10月 16日 ##### 運営会社 運営会社 - [会社概要](https://www.insight-lab.co.jp/about/company.html) - [お問い合わせ](https://contact.insight-lab.co.jp/main) ##### メニュー メニュー - Sisenseとは - [Sisenseナレッジ](https://knowledge.insight-lab.co.jp/sisense) - [セミナー](https://event.insight-lab.co.jp/sisense-seminar) - [お役立ち資料](https://download.insight-lab.co.jp/sisense/download) [![INSIGHT LAB_文字のみ_WHT-1](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=200&height=55&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png "INSIGHT LAB_文字のみ_WHT-1")](https://www.insight-lab.co.jp/) - [プライバシーポリシー](https://www.insight-lab.co.jp/privacy.html) Copyright © 2020 INSIGHT LAB, Inc.