CSVファイルの読み込み方

使い方

CSVファイルの読み込み方

参加者 1人 返信 0件 最終更新 1週間前
Kei
1週間前
#542

みなさんこんにちは! 
デジキャス 永田です。

ROSS VIDEO COMMUNITYをご利用の皆様のお力になれればと思い、不定期コラムの形でスクリプティングについて解説をさせて頂きます。

今回は、最も基本的な外部データ連携、「CSVファイルのデータ読込み」についてサンプルスクリプトを交えて解説いたします。

CSVやテキストファイルを読み込む際は、組み込み関数のasyncPostを使用すると便利です。

ogscript.asyncPost(URL, DATA, CALLBACK, INCLUDE_RESPONSE);

URL <String> 通信先URL
DATA <String / null> 送信データ
CALLBACK <Function> 通信完了後に実行する関数
INCLUDE_RESPONSE <Boolean> HTTPステータスなどを取得する。省略可能

特に第2引数が重要です。
   – null を指定すると HTTP GET
   – 文字列を指定すると HTTP POST
ここでnullを指定し、第1引数にローカルファイルのディレクトリを指定することで、内容をHTTP GET(文字列として取得)することができます。
そしてGETで返ってきた文字列は第3引数で指定した関数に渡されます。

実際のTaskは以下のような形になります。

function processCSV(fileContent){ //コールバック関数
   
   if (fileContent == null) //ファイルがない場合の例外処理
   {
      ogscript.debug("FILE LOAD FAILED");
      return;
   }
   
   var rows = fileContent.split('\n'); //CSVから行ごとにrowsに格納

   for(var r=0; r<10; r++){
      
      if(r < rows.length){ // データ範囲外の場合は空白
         params.setValue('rows', r, rows[r]);
         ogscript.debug(rows[r]);
      }else{
         params.setValue('rows', r, "");
         ogscript.debug("<noData>");
      }

   }
   
}

//第3引数はコールバック関数
ogscript.asyncPost(params.getValue('fileURI', 0), null, processCSV); 


ここでは「fileURI」というParamに格納された文字列で指定されたファイルをprocessCSVに対してfileContentという変数に格納して渡すことになります。

var rows = fileContent.split('\n'); 
そしてfileContentの中の文字列は一旦改行で分割され、行ごとにrows[0],[1],[2]…の中に格納されます。

params.setValue('rows', r, rows[r]);
そしてfor文で10行目までをSTRING_ARRAY型のParamであるrowsに1行ずつ書き込みます。

      if(r < rows.length){ // データ範囲外の場合は空白
     ...
      }else{
         params.setValue('rows', r, "");
         ogscript.debug("<noData>");
      }

if文でcsvが10行以下の場合は空白を書き込むようにしています。

実際の運用ではセル毎のデータが必要になる場合もあります。
その場合、以下のようにループを2重にすることでセルのデータを取得します。

var cells = ['']

for(var r=0; r<10; r++){
   cells = params.getValue('rows', r).split(',');
   for(var c=0; c<cells.length; c++){
      ogscript.debug(cells[c]); //debugウィンドウにcellの内容を羅列
   }
}

このようにParamを経由してデータを展開する方法は処理速度はあまり早くありません。
100行程度のCSVであれば問題ないかもしれませんが、数万行のデータを処理するのには不向きです。

その場合、展開時に構造体型のParamに展開し、オブジェクトとして処理をすることで大幅に高速化することが可能です。
そちらはスクリプティングも複雑になりますので、またの機会にご説明できればと思います。

ご質問、コメント等頂けますと幸いです。

—以下全文コピペ用—

<abs contexttype="opengear" id="_top" keepalive="false" style="">
    <meta>
        <params>
            <param access="1" maxlength="0" name="fileURI" oid="fileURI" type="STRING" value="racket_sample3.csv" widget="text"/>
            <param access="1" maxlength="-1" name="rows" oid="rows" precision="-1" type="STRING_ARRAY" widget="default">
                <value>,affilication-jp,affilication-en,number,name-jp,name-en</value>
                <value>1,,,1,佐藤,Sato</value>
                <value>2,,,2,鈴木,Suzuki</value>
                <value>3,,,3,高橋,Takahashi</value>
                <value>23,,,23,池田,Ikeda</value>
                <value>1,監督,大西,,,</value>
                <value/>
                <value/>
                <value/>
                <value/>
            </param>
        </params>
    </meta>
    <button buttontype="push" height="37" left="55" name="load" top="120" width="94">
        <task tasktype="ogscript">function processCSV(fileContent){ //コールバック関数
   
   if (fileContent == null) //ファイルがない場合の例外処理
   {
      ogscript.debug("FILE LOAD FAILED");
      return;
   }
   
   var rows = fileContent.split('\n'); //CSVから行ごとにrowsに格納

   for(var r=0; r&lt;10; r++){
      
      if(r &lt; rows.length){ // データ範囲外の場合は空白
         params.setValue('rows', r, rows[r]);
         ogscript.debug(rows[r]);
      }else{
         params.setValue('rows', r, "");
         ogscript.debug("&lt;noData&gt;");
      }

   }
   
}

//第3引数はコールバック関数
ogscript.asyncPost(params.getValue('fileURI', 0), null, processCSV); 
</task>
    </button>
    <param expand="true" height="42" left="54" oid="fileURI" top="54" widget="file-picker" width="624">
        <config key="w.filetypes">csv,csv</config>
    </param>
    <simplegrid cols="1" height="376" id="list" left="58" rows="10" top="187" width="651">
        <param element="0" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="1" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="2" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="3" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="4" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="5" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="6" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="7" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="8" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
        <param element="9" expand="true" height="374" left="62" oid="rows" showlabel="false" top="198" widget="default" width="652"/>
    </simplegrid>
    <button buttontype="push" height="60" id="" left="58" name="get cell" top="591" width="155">
        <task tasktype="ogscript">var cells = ['']

for(var r=0; r&lt;10; r++){
   cells = params.getValue('rows', r).split(',');
   for(var c=0; c&lt;cells.length; c++){
      ogscript.debug(cells[c]);
   }
}</task>
    </button>
</abs>

リンクをコピー

このトピックに返信するにはログインが必要です。