001/*
002 * Copyright (c) 2009 The openGion Project.
003 *
004 * Licensed under the Apache License, Version 2.0 (the "License");
005 * you may not use this file except in compliance with the License.
006 * You may obtain a copy of the License at
007 *
008 *     http://www.apache.org/licenses/LICENSE-2.0
009 *
010 * Unless required by applicable law or agreed to in writing, software
011 * distributed under the License is distributed on an "AS IS" BASIS,
012 * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND,
013 * either express or implied. See the License for the specific language
014 * governing permissions and limitations under the License.
015 */
016package org.opengion.hayabusa.taglib;
017
018import org.opengion.fukurou.system.OgRuntimeException ;         // 6.4.2.0 (2016/01/29)
019import org.opengion.hayabusa.common.HybsSystem;
020import org.opengion.hayabusa.common.HybsSystemException;
021import org.opengion.hayabusa.common.HybsOverflowException;              // 6.2.5.0 (2015/06/05)
022import org.opengion.hayabusa.resource.GUIInfo;
023import org.opengion.hayabusa.db.DBColumn;
024import org.opengion.hayabusa.db.ColumnActionListener;                   // 6.2.2.0 (2015/03/27)
025import org.opengion.hayabusa.io.TableReader;
026import org.opengion.fukurou.db.Transaction;
027import org.opengion.fukurou.util.ErrorMessage;                                  // 6.2.5.0 (2015/06/05)
028import org.opengion.fukurou.util.StringUtil;
029import org.opengion.fukurou.system.Closer ;
030import org.opengion.fukurou.util.ToString;                                              // 6.1.1.0 (2015/01/17)
031import org.opengion.fukurou.util.FileInfo;                                              // 6.2.3.0 (2015/05/01)
032import org.opengion.fukurou.model.Formatter;
033import org.opengion.fukurou.model.ArrayDataModel;
034
035import static org.opengion.fukurou.util.StringUtil.nval ;
036import static org.opengion.fukurou.system.HybsConst.BR;                 // 6.1.0.0 (2014/12/26) refactoring
037
038import java.sql.Connection;
039import java.sql.PreparedStatement;
040import java.sql.SQLException;
041
042import java.io.File;
043import java.util.List ;                                                                                 // 7.3.0.0 (2021/01/06)
044
045/**
046 * 指定のファイルを直接データベースに登録するデータ入力タグです。
047 *
048 * 通常の readTable などは、DBTableModelオブジェクトを介して全件メモリに
049 * ロードしてから表示させる為、大量データ処理ができません。
050 * このタグでは、直接ファイルを読み取りながらデータベース登録するので
051 * 大量データをバッチ的に登録する場合に使用します。
052 *
053 * 読み取るファイルは、先頭(または実データが現れるまでに) #NAME 行が必要です。
054 * これは、ファイルデータのカラム名を指定しています。また、columns 属性を使用すれば、
055 * ファイルの#NAME 行より優先して(つまり存在していなくても良い)データのカラム名を
056 * 指定することが出来ます。
057 * この#NAME 行は、ファイルのセパレータと無関係に必ずタブ区切りで用意されています。
058 * タグのBODY部に、実行するSQL文を記述します。
059 * このSQL文は、
060 * INSERT INTO GE41 (CLM,NAME_JA,SYSTEM_ID,FGJ,DYSET)
061 * VALUES ([CLM],[NAME_JA],[SYSTEM_ID],'1','{@USER.YMDH}')
062 * と、いう感じで、ファイルから読み込んだ値は、[カラム名]に割り当てられます。
063 * もちろん、通常の固定値(FGJに'1'をセット)や、リクエスト変数(DYSETの{@USER.YMDH})
064 * なども使用できます。
065 *
066 * ※ 6.2.3.0 (2015/05/01)
067 *    BODY部にSQL文を記述しない場合は、table 属性に、INSERTするテーブルIDを指定します。
068 *
069 * ※ 6.2.4.0 (2015/05/15)
070 *    omitNames に、WRITABLE と ROWID を、強制的に含めます(無条件)。
071 *
072 * ※ 7.3.1.3 (2021/03/09) DB.NAMES , DB.ORGNAMES
073 *    #NAME や columns で指定したカラムは、{@DB.NAMES} で取り出すことが可能です。
074 *    ファイルにかかれた、オリジナルの #NAME は、{@DB.ORGNAMES} で取り出すことが可能です。
075 *
076 * ※ このタグは、Transaction タグの対象です。
077 *
078 * @og.formSample
079 * ●形式:<og:directTableInsert filename="[・・・]" ・・・ >INSERT INTO ・・・ </og:directTableInsert >
080 * ●body:あり(EVAL_BODY_BUFFERED:BODYを評価し、{@XXXX} を解析します)
081 *
082 * ●Tag定義:
083 *   <og:directTableInsert
084 *       readerClass        【TAG】実際に読み出すクラス名の略称(TableReader_**** の ****)をセットします
085 *                                  (初期値:TABLE_READER_DEFAULT_CLASS[={@og.value SystemData#TABLE_READER_DEFAULT_CLASS}])
086 *  専   commitBatch        【TAG】指定数毎にコミットを発行します(初期値:0 終了までコミットしません)
087 *  専   dbid               【TAG】(通常は使いません)検索時のDB接続IDを指定します(初期値:DEFAULT)
088 *  専   table              【TAG】BODYのSQL文を指定しない場合に使用するテーブルIDを指定します
089 *       command            【TAG】コマンド (NEW,RENEW)をセットします(初期値:NEW)
090 *       fileURL            【TAG】読取元ディレクトリ名を指定します(初期値:FILE_URL)
091 *       filename           【TAG】ファイルを作成するときのファイル名をセットします (初期値:FILE_FILENAME[=file.xls])
092 *       encode             【TAG】ファイルを作成するときのファイルエンコーディング名をセットします(初期値:FILE_ENCODE)
093 *       skipRowCount       【TAG】(通常は使いません)データの読み飛ばし件数を設定します
094 *       maxRowCount        【TAG】読取時の最大取り込み件数をセットします (初期値:0:[無制限])
095 *       errRowCount        【TAG】読取時の最大エラー件数をセットします (初期値:{@og.value ReadTableTag#ERROR_ROW_COUNT})(0:[無制限])
096 *       separator          【TAG】可変長ファイルを作成するときの項目区切り文字をセットします
097 *       columns            【TAG】読取元ファイルのカラム列を、外部(タグ)よりCSV形式で指定します
098 *       omitNames          【TAG】読取対象外のカラム列を、外部(タグ)よりCSV形式で指定します
099 *       modifyType         【TAG】ファイル取り込み時の モディファイタイプ(A(追加),C(更新),D(削除))を指定します
100 *       displayMsg         【TAG】query の結果を画面上に表示するメッセージIDを指定します(初期値:VIEW_DISPLAY_MSG[={@og.value SystemData#VIEW_DISPLAY_MSG}]))
101 *       overflowMsg        【TAG】読取データが最大検索数をオーバーした場合に表示するメッセージリソースIDを指定します (初期値:MSG0007[検索結果が、制限行数を超えましたので、残りはカットされました])
102 *       notfoundMsg        【TAG】検索結果がゼロ件の場合に表示するメッセージリソースIDを指定します(初期値:MSG0077[対象データはありませんでした])
103 *  ※   sheetName          【TAG】EXCELファイルを読み込むときのシート名を設定します(初期値:指定なし)
104 *  ※   sheetNos           【TAG】EXCELファイルを読み込むときのシート番号を複数設定できます(初期値:0)
105 *  ※   sheetConstKeys     【TAG】EXCELファイルを読み込むときの固定値となるカラム名(CSV形式)
106 *  ※   sheetConstAdrs     【TAG】EXCELファイルを読み込むときの固定値となるアドレス(行-列,行-列,・・・)
107 *       nullBreakClm       【TAG】カラム列に NULL が現れた時点で読取を中止します(複数Sheetの場合は、次のSheetを読みます)。
108 *       nullSkipClm        【TAG】カラム列に NULL が現れたレコードは読み飛ばします。
109 *       useNumber          【TAG】行番号情報を、使用している/していない[true/false]を指定します(初期値:true)
110 *       useRepeatClms      【TAG】読取処理で横持ちデータの繰り返しが存在する場合に、trueを指定します(初期値:false) 7.3.0.0 (2021/01/06)
111 *       useRenderer        【TAG】読取処理でKEY:VAL形式のコードリソースから、KEYを取り出す処理を行うかどうかを指定します(初期値:USE_TABLE_READER_RENDERER[=false])
112 *       adjustColumns      【TAG】読取元ファイルのデータ変換を行うカラム列をカンマ指定します
113 *       checkColumns       【TAG】読取元ファイルの整合性チェックを行うカラム列をカンマ指定します
114 *       useStrict          【TAG】整合性チェック時に、厳密にチェックするかどうか[true/false]を指定します(初期値:true) 7.3.2.0 (2021/03/19)
115 *       nullCheck          【TAG】NULL チェックすべきカラム列をCSV形式(CSV形式)で指定します
116 *       matchKeys          【TAG】レコードの読取条件指定時のカラム列をCSV形式で指定します 6.4.6.0 (2016/05/27)
117 *       matchVals          【TAG】レコードの読取条件指定時のカラム列に対応する正規表現データをCSV形式で指定します 6.4.6.0 (2016/05/27)
118 *       language           【TAG】タグ内部で使用する言語コード[ja/en/zh/…]を指定します
119 *       stopZero           【TAG】読込件数が0件のとき処理を続行するかどうか[true/false]を指定します(初期値:false[続行する])
120 *       mainTrans          【TAG】(通常は使いません)タグで処理される処理がメインとなるトランザクション処理かどうかを指定します(初期値:false)
121 *       tableId            【TAG】(通常は使いません)sessionから所得する DBTableModelオブジェクトの ID
122 *       scope              【TAG】キャッシュする場合のスコープ[request/page/session/application]を指定します(初期値:session)
123 *       useTimeView        【TAG】処理時間を表示する TimeView を表示するかどうかを指定します
124 *                                                                              (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。
125 *       useSLabel          【TAG】7.0.7.0 (2019/12/13) エラーメッセージにSLABELを利用するかどうか[true/false]を指定します(初期値:false)
126 *       useLocal           【TAG】システム定数でクラウド設定されていても、クラウド環境を使用しない場合、trueを指定します(初期値:false) 8.0.1.0 (2021/10/29)
127 *       caseKey            【TAG】このタグ自体を利用するかどうかの条件キーを指定します(初期値:null) 5.7.7.2 (2014/06/20)
128 *       caseVal            【TAG】このタグ自体を利用するかどうかの条件値を指定します(初期値:null) 5.7.7.2 (2014/06/20)
129 *       caseNN             【TAG】指定の値が、null/ゼロ文字列 でない場合(Not Null=NN)は、このタグは使用されます(初期値:判定しない) 5.7.7.2 (2014/06/20)
130 *       caseNull           【TAG】指定の値が、null/ゼロ文字列 の場合は、このタグは使用されます(初期値:判定しない) 5.7.7.2 (2014/06/20)
131 *       caseIf             【TAG】指定の値が、true/TRUE文字列の場合は、このタグは使用されます(初期値:判定しない)
132 *       debug              【TAG】デバッグ情報を出力するかどうか[true/false]を指定します(初期値:false)
133 *   >   ... Body ...
134 *   </og:directTableInsert>
135 *
136 * ●使用例
137 *     <og:directTableInsert
138 *         dbid         = "ORCL"                接続データベースID(初期値:DEFAULT)
139 *         separator    = ","                   ファイルの区切り文字(初期値:タブ)
140 *         fileURL      = "{@USER.ID}"     読み取り元ディレクトリ名
141 *         filename     = "{@filename}"    読み取り元ファイル名
142 *         encode       = "Shift_JIS"           読み取り元ファイルエンコード名
143 *         displayMsg   = "MSG0040"             登録完了後のメッセージ
144 *         columns      = "CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG"
145 *                                              #NAME の代わりに使用するカラム列名
146 *         commitBatch  = "100"                 この件数ずつコミットを発行(初期値:無制限)
147 *         useColumnCheck  = "true"             カラムチェックを行うかどうか(初期値:false)
148 *         useColumnAdjust = "true"             カラム変換を行うかどうか(初期値:false)
149 *         nullCheck       = "CLM,SYSTEM_ID"    NULLチェックを実行します。
150 *     >
151 *          INSERT INTO GE41
152 *              (CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG,
153 *                 FGJ,DYSET,DYUPD,USRSET,USRUPD,PGUPD)
154 *          VALUES
155 *              ([CLM],[NAME_JA],[LABEL_NAME],[KBSAKU],[SYSTEM_ID],[LANG],
156 *                '1','{@USER.YMDH}','{@USER.YMDH}','{@USER.ID}','{@USER.ID}','{@GUI.KEY}')
157 *     </og:directTableInsert >
158 *
159 * @og.group ファイル入力
160 *
161 * @version  4.0
162 * @author   Kazuhiko Hasegawa
163 * @since    JDK5.0,
164 */
165public class DirectTableInsertTag extends ReadTableTag {
166        /** このプログラムのVERSION文字列を設定します。 {@value} */
167        private static final String VERSION = "7.0.7.0 (2019/12/13)" ;
168        private static final long serialVersionUID = 707020191213L ;
169
170        // 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します(WRITABLE,ROWID)
171        private static final String DEFAULT_OMIT = "WRITABLE,ROWID" ;
172
173        // 4.0.0.0 (2007/10/10) dbid の初期値を、"DEFAULT" から null に変更
174        private String          dbid            ;
175        private int                     commitBatch     ;                               // コミットするまとめ件数
176        private String          sql                     ;
177        private String          table           ;                               // 6.2.3.0 (2015/05/01)
178        private long            dyStart         ;                               // 実行時間測定用のDIV要素を出力します。
179        private boolean         useTimeView     = HybsSystem.sysBool( "VIEW_USE_TIMEBAR" );             // 6.3.6.0 (2015/08/16)
180        private boolean         sqlError        ;                               // 8.1.1.0 (2022/02/04) sqlError フラグでの判定は、DirectTableInsertTag のみで行います。
181
182        /**
183         * デフォルトコンストラクター
184         *
185         * @og.rev 6.4.2.0 (2016/01/29) PMD refactoring. Each class should declare at least one constructor.
186         */
187        public DirectTableInsertTag() { super(); }              // これも、自動的に呼ばれるが、空のメソッドを作成すると警告されるので、明示的にしておきます。
188
189        /**
190         * Taglibの開始タグが見つかったときに処理する doStartTag() を オーバーライドします。
191         *
192         * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
193         * @og.rev 6.2.3.0 (2015/05/01) table属性追加。BODYのSQL文が無くても、table属性で自動生成します。
194         * @og.rev 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します。
195         *
196         * @return      後続処理の指示( EVAL_BODY_BUFFERED )
197         */
198        @Override
199        public int doStartTag() {
200                dyStart = System.currentTimeMillis();
201
202                // 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します。
203                addOmitNames( DEFAULT_OMIT );
204
205                // 6.2.3.0 (2015/05/01) table属性追加
206                // 6.4.1.1 (2016/01/16) PMD refactoring. A method should have only one exit point, and that should be the last statement in the method
207                return table == null || table.isEmpty()
208                                        ? EVAL_BODY_BUFFERED            // Body を評価する。( extends BodyTagSupport 時)
209                                        : SKIP_BODY ;                           // Body を評価しない
210        }
211
212        /**
213         * Taglibのタグ本体を処理する doAfterBody() を オーバーライドします。
214         *
215         * @og.rev 3.6.0.2 (2004/10/04) SQL文の [カラム] 対応とパーサー機能追加
216         * @og.rev 3.8.6.3 (2006/11/30) SQL 文の前後のスペースを取り除きます。
217         * @og.rev 6.2.3.0 (2015/05/01) table属性追加。BODYのSQL文が無くても、table属性で自動生成します。
218         *
219         * @return      後続処理の指示(SKIP_BODY)
220         */
221        @Override
222        public int doAfterBody() {
223                sql = getBodyString();
224                if( sql == null || sql.isEmpty() || sql.trim().isEmpty() ) {
225                        final String errMsg = "table属性を指定しない場合は、BODY 部の登録用 Insert/Update文は、必須です。";
226                        throw new HybsSystemException( errMsg );
227                }
228
229                return SKIP_BODY ;                              // Body を評価しない
230        }
231
232        /**
233         * #doEndTag() の後続処理を記述します。
234         *
235         * これは、サブクラスで、DBTableModel以外の処理を行う場合に、
236         * 処理内容を分けるために用意します。
237         *
238         * @og.rev 6.2.2.0 (2015/03/27) #afterEnd() メソッド 新規作成。
239         * @og.rev 6.2.5.0 (2015/06/05) AutoReaderの仕様変更。checkColumns エラー処理が抜けていたので、追加します。
240         * @og.rev 7.0.7.0 (2019/12/13) useSLabel 属性を追加。
241         *
242         * @return      後続処理の指示
243         */
244        @Override
245        protected int afterEnd() {
246                // 6.2.5.0 (2015/06/05) エラー処理の追加
247                final ErrorMessage errMsg = clmAct.getErrorMessage();
248                if( !errMsg.isOK() ) {
249//                      jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource() ) );
250                        jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource(),useSLabel ) );            // 7.0.7.0 (2019/12/13)
251                        return SKIP_PAGE ;
252                }
253
254                // 実行件数の表示
255                // 4.0.0 (2005/11/30) 出力順の変更。一番最初に出力します。
256                if( displayMsg != null && displayMsg.length() > 0 ) {
257                        final String status = executeCount + getResource().getLabel( displayMsg ) ;
258                        jspPrint( status + BR );
259                }
260
261                // 5.7.6.2 (2014/05/16) 検索結果の件数を、"DB.COUNT" キーでリクエストにセットする。
262                setRequestAttribute( "DB.COUNT" , String.valueOf( executeCount ) );
263
264                // 5.7.6.2 (2014/05/16) 件数0件かつ stopZero = true
265                if( executeCount == 0 && stopZero ) { return SKIP_PAGE; }
266
267                final long dyTime = System.currentTimeMillis()-dyStart;
268
269                // 4.0.0 (2005/01/31) セキュリティチェック(データアクセス件数登録)
270                final GUIInfo guiInfo = (GUIInfo)getSessionAttribute( HybsSystem.GUIINFO_KEY );
271                if( guiInfo != null ) { guiInfo.addWriteCount( executeCount,dyTime,sql ); }
272
273                if( useTimeView ) {             // 6.3.6.0 (2015/08/16)
274                        // 時間測定用の DIV 要素を出力
275                        jspPrint( "<div id=\"queryTime\" value=\"" + (dyTime) + "\"></div>" );  // 3.5.6.3 (2004/07/12)
276                }
277                return EVAL_PAGE ;
278        }
279
280        /**
281         * タグリブオブジェクトをリリースします。
282         * キャッシュされて再利用されるので、フィールドの初期設定を行います。
283         *
284         * @og.rev 3.6.0.2 (2004/10/04) useColumnCheck,useColumnAdjust 属性追加
285         * @og.rev 3.8.0.2 (2005/06/30) nullCheck 属性追加
286         * @og.rev 4.0.0.0 (2007/10/10) dbid の初期値を、"DEFAULT" から null に変更
287         * @og.rev 5.5.7.1 (2012/10/05) skipRowCount追加
288         * @og.rev 5.7.6.2 (2014/05/16) stopZero属性追加
289         * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
290         * @og.rev 6.2.3.0 (2015/05/01) table属性追加
291         */
292        @Override
293        protected void release2() {
294                super.release2();
295                dbid                    = null;
296                commitBatch             = 0;                                    // コミットするまとめ件数
297                table                   = null;                                 // 6.2.3.0 (2015/05/01)
298                useTimeView     = HybsSystem.sysBool( "VIEW_USE_TIMEBAR" );     // 6.3.6.0 (2015/08/16)
299        }
300
301        /**
302         * ファイルオブジェクト より読み込み、データベースに書き込みます。
303         *
304         * @og.rev 3.6.0.2 (2004/10/04) カラムオブジェクトのDBType属性の整合性チェック
305         * @og.rev 3.8.0.2 (2005/06/30) nullチェック確認
306         * @og.rev 3.8.5.1 (2006/05/08) 取込データが name 列より少ない場合の対応を追加
307         * @og.rev 3.8.7.0 (2006/12/15) アクセスログ取得の為,ApplicationInfoオブジェクトを設定
308         * @og.rev 4.0.0.0 (2005/01/31) CheckColumnDataクラス static 化、引数にResourceManager追加
309         * @og.rev 4.0.0.1 (2007/12/03) try ~ catch ~ finally をきちんと行う。
310         * @og.rev 5.1.9.0 (2010/08/01) Transaction 対応
311         * @og.rev 5.2.2.0 (2010/11/01)) ""で囲われているデータに改行が入っていた場合の対応
312         * @og.rev 5.3.7.0 (2011/07/01) TransactionReal の引数変更
313         * @og.rev 5.3.8.0 (2011/08/01) pstmt.setObject で、useParamMetaData の判定を避けるため、pstmt.setString で代用(PostgreSQL対応)
314         * @og.rev 5.5.7.1 (2012/10/05) omitFirstLine対応
315         * @og.rev 5.7.0.3 (2013/11/22) BufferedReaderのclose処理をこのメソッド内のfinallyで行う
316         * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
317         * @og.rev 6.2.3.0 (2015/05/01) 行読み飛ばし nullSkipClm追加
318         * @og.rev 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。
319         * @og.rev 6.2.5.0 (2015/06/05) AutoReaderの仕様変更。checkColumns エラー処理が抜けていたので、追加します。
320         * @og.rev 6.3.6.1 (2015/08/28) Transaction でAutoCloseableを使用したtry-with-resources構築に対応。
321         * @og.rev 6.4.3.3 (2016/03/04) HybsSystem.newInstance(String,String) への置き換え。
322         * @og.rev 6.6.0.1 (2016/12/07) エンコードが複数ある場合、SQLのパースで、上書きするとカラム名が取れないバグ修正。
323         * @og.rev 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする
324         *
325         * @param   file ファイルオブジェクト
326         */
327        @Override
328        protected void create( final File file )  {
329
330                // 6.3.6.1 (2015/08/28) Transaction で処理
331                try( Transaction tran = getTransaction() ) {
332                        /**
333                         * ColumnActionListenerインターフェースの内部無名クラス
334                         *
335                         * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
336                         * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理
337                         *
338                         * @param names カラム名配列
339                         */
340                        final ColumnActionListener listener = new ColumnActionListener() {
341                                private DBColumn[]      dbClms ;
342                                private String[]        clmKeys         ;                               // SQL文の[カラム名]配列
343                                private int                     commitCount ;
344
345                                private int[] clmNos    ;
346                                private int   clmNosLen ;
347
348                                private PreparedStatement pstmt  ;
349                                private final Connection conn = tran.getConnection( dbid );             // 6.3.6.1 (2015/08/28)
350
351                                /**
352                                 * 一連の作業終了時に呼ばれます。
353                                 *
354                                 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
355                                 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理
356                                 *
357                                 */
358                                @Override
359                                public void end() {
360                                        Closer.stmtClose( pstmt );
361                                        tran.commit();                                  // 6.3.6.1 (2015/08/28) ここでは常にcommit()させる。
362                                }
363
364                                /**
365                                 * カラム名の配列が設定された場合に、呼び出されます。
366                                 *
367                                 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。
368                                 * @og.rev 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。
369                                 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理
370                                 * @og.rev 6.4.1.1 (2016/01/16) HybsOverflowException をthrow するとき、最大件数を引数に渡す。
371                                 * @og.rev 6.4.3.4 (2016/03/11) Formatterに新しいコンストラクターを追加する。
372                                 * @og.rev 6.6.0.1 (2016/12/07) エンコードが複数ある場合、SQLのパースで、上書きするとカラム名が取れないバグ修正。
373                                 * @og.rev 6.9.5.0 (2018/04/23) カラム名が存在しない場合に、Exception を throw するかどうかを指定可能にする。
374                                 * @og.rev 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする
375                                 * @og.rev 7.3.1.1 (2021/02/25) カラム列を、"DB.NAMES" キーでリクエストにセットする。
376                                 *
377                                 * @param names カラム名配列
378                                 */
379                                @Override
380                                public void columnNames( final String[] names ) {
381                                        String pstSql = null;                   // 6.6.0.1 (2016/12/07)
382
383                                        final String[] nms = clmAct.makeNames( names );
384
385                                        // 6.4.1.1 (2016/01/16) PMD refactoring. Avoid if (x != y) ..; else ..;
386                                        if( table == null || table.isEmpty() ) {
387                                                if( sql != null && !sql.isEmpty() ) {
388//                                                      final ArrayDataModel nmdata = new ArrayDataModel( nms );
389                                                        final ArrayDataModel nmdata = new ArrayDataModel( nms,true );   // 6.9.5.0 (2018/04/23) カラム名が存在しない場合に、Exception を throw する
390                                                        final Formatter format = new Formatter( nmdata,sql.trim() );    // 6.4.3.4 (2016/03/11)
391                                                        clmNos          = format.getClmNos();                                                           // 指定されたセルのカラム番号。存在しなければ、Exception を throw する
392                                                        clmNosLen       = clmNos.length ;
393                                                        clmKeys         = format.getClmKeys();
394                                                        pstSql          = format.getQueryFormatString();                                        // 6.6.0.1 (2016/12/07)
395                                                }
396                                        }
397                                        else {
398                                                if( "FILE.NAME".equals( table ) ) {
399                                                        table = FileInfo.getNAME( file );
400                                                }
401
402                                                clmNosLen = nms.length;
403                                                clmNos  = new int[clmNosLen];
404                                                clmKeys = nms;
405
406                                                final StringBuilder buf = new StringBuilder( BUFFER_MIDDLE );
407                                                buf.append( "INSERT INTO " ).append( table ).append( " ( " )
408                                                        .append( String.join( ",",nms ) )
409                                                        .append( " ) VALUES ( ?" );
410                                                clmNos[0] = 0;
411                                                for( int i=1; i<clmNosLen; i++ ) {
412                                                        clmNos[i] = i;
413                                                        buf.append( ",?" );
414                                                }
415                                                buf.append( ')' );
416                                                pstSql = buf.toString();                        // 6.6.0.1 (2016/12/07)
417                                        }
418
419                                        try {
420                                                pstmt = conn.prepareStatement( pstSql );                        // 6.6.0.1 (2016/12/07)
421                                        }
422                                        catch( final SQLException ex ) {
423                                                final String errMsg = CR + ex.getMessage()                                                                      + CR
424                                                                                        + " sql   =["            + sql                                          + "]"   + CR
425                                                                                        + " names =[" + StringUtil.array2csv( names )   + "]"   + CR            // 6.6.0.1 (2016/12/07)
426                                                                                        + " encode=[" + encode                                                  + "]"   + CR            // 6.6.0.1 (2016/12/07)
427                                                                                        + " ErrorCode=[" + ex.getErrorCode()                    + "]"
428                                                                                        + " State=["     + ex.getSQLState()                             + "]"   + CR ;
429                                                jspPrint( errMsg );
430                                                tran.rollback();                                                                                // 6.3.6.1 (2015/08/28) Transaction で処理
431                                //              tran.close();                                                                                   // 6.3.6.1 (2015/08/28) Transaction で処理
432                                                sqlError = true;                                                                                // 6.3.6.1 (2015/08/28) DirectTableInsertTag でSQLException発生時
433                                                throw new HybsSystemException( errMsg,ex );                             // 6.2.4.2 (2015/05/29) refactoring
434                                        }
435
436                                        final StringBuilder nmsBuf = new StringBuilder( BUFFER_MIDDLE );                // 7.3.1.1 (2021/02/25)
437                                        dbClms = new DBColumn[nms.length];
438                                        for( int no=0; no<nms.length; no++ ) {
439                                                nmsBuf.append( ',' ).append( nms[no] );                                                         // 7.3.1.1 (2021/02/25)
440                                                dbClms[no] = getDBColumn( nms[no] );
441                                        }
442
443                                        if( nmsBuf.length() > 1 ) {             // 7.3.1.1 (2021/02/25) 最初のカンマを削除して、DB.NAMES で登録する。
444                                                setRequestAttribute( "DB.NAMES" , nmsBuf.substring(1) );
445                                        }
446
447                                        // 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。
448                                        // 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする
449//                                      executeCount++ ;
450                                        executeCount = 0;                       // 7.0.4.3 (2019/07/15)
451                                }
452
453                                /**
454                                 * #NAME のオリジナルカラム名配列がそろった段階で、イベントが発生します。
455                                 *
456                                 * @og.rev 7.3.1.3 (2021/03/09) #NAMEのオリジナルを取得できるようにします。
457                                 *
458                                 * @param   names  カラム名配列
459                                 */
460                                @Override
461                                public void originalNames( final String[] names ) {
462                                        if( names != null && names.length > 0 ) {
463                                                final StringBuilder nmsBuf = new StringBuilder( BUFFER_MIDDLE );
464                                                for( int no=0; no<names.length; no++ ) {
465                                                        nmsBuf.append( ',' ).append( names[no] );
466                                                }
467
468                                                if( nmsBuf.length() > 1 ) {             // 7.3.1.1 (2021/02/25) 最初のカンマを削除して、DB.NAMES で登録する。
469                                                        setRequestAttribute( "DB.ORGNAMES" , nmsBuf.substring(1) );
470                                                }
471                                        }
472                                }
473
474                                /**
475                                 * 1行分のデータが設定された場合に、呼び出されます。
476                                 *
477                                 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応
478                                 * @og.rev 6.2.5.0 (2015/06/05) 読み取り件数オーバーフロー時、HybsOverflowException を throw します
479                                 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理
480                                 * @og.rev 6.3.9.0 (2015/11/06) コンストラクタで初期化されていないフィールドを null チェックなしで利用している(findbugs)
481                                 * @og.rev 6.4.6.0 (2016/05/27) レコードの読取条件指定を追加。条件に一致しなければ、null が返されます
482                                 * @og.rev 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応
483                                 * @og.rev 7.3.1.3 (2021/03/09) [J] で、登録件数(1~) を表現する。
484                                 *
485                                 * @param   vals    文字列値の1行分の配列
486                                 * @param   rowNo   行番号(0~)
487                                 */
488                                @Override
489                                public void values( final String[] vals, final int rowNo ) {
490                                        if( maxRowCount <= 0 || executeCount <= maxRowCount ) {         // 読み取り件数無制限か、最大件数以下の場合
491                                                // 6.3.9.0 (2015/11/06) コンストラクタで初期化されていないフィールドを null チェックなしで利用している(findbugs)
492                                                // 6.4.1.1 (2016/01/16) PMD refactoring. 処理の順番を入れ替えます。
493                                                if( pstmt == null || clmNos == null ) {
494                                                        final String errMsg = "#columnNames(String[])を先に実行しておいてください。"  ;
495                                                        throw new OgRuntimeException( errMsg );
496                                                }
497
498                                                try {
499                                                        // 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応。
500                                                        final List<String[]> valsList = clmAct.clmAction( vals , dbClms , rowNo );      // この処理結果が、getErrorMessage() に反映するので、移動不可
501//                                                      final String[] newVals = clmAct.clmAction( vals , dbClms , rowNo );                     // この処理結果が、getErrorMessage() に反映するので、移動不可
502
503                                                        // 6.2.5.0 (2015/06/05) エラー発生時は、以下の処理は行いません。
504                                                        // 6.4.6.0 (2016/05/27) レコードの読取条件指定を追加。条件に一致しなければ、null が返されます。
505//                                                      if( newVals == null || !clmAct.getErrorMessage().isOK() || sqlError ) { return; }               // 6.3.6.1 (2015/08/28)
506                                                        if( valsList.isEmpty() || !clmAct.getErrorMessage().isOK() || sqlError ) { return; }    // 7.3.0.0 (2021/01/06)
507
508                                                        // 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応。
509                                                        for( final String[] newVals : valsList ) {
510                                                                // ※ skipTailCount:末尾から指定行数分は取り込まない処理を入れる場合、newVals[]をListにaddしておき、指定件数以上で先頭を処理する。
511                                                                for( int i=0; i<clmNosLen; i++ ) {
512                                                                        // 7.3.1.3 (2021/03/09) [I] で行番号を指定できるようにする。
513//                                                                      pstmt.setString( i+1,newVals[clmNos[i]] );
514                                                                        if( clmNos[i] >= 0 ) {
515                                                                                pstmt.setString( i+1,newVals[clmNos[i]] );
516                                                                        }
517                                                                        // 7.3.1.3 (2021/03/09) ここでは行番号をセットします。
518                                                                        else if( clmNos[i] == Formatter.SYS_ROWNUM ) {                          // [KEY.カラム名] , [I] , [ROW.ID] は、行番号指定
519                                                                                pstmt.setString( i+1,String.valueOf( rowNo ) );                 // ここでは行番号をセットします。
520                                                                        }
521                                                                        // 7.3.1.3 (2021/03/09) [J] 登録時の件数(1~)
522                                                                        else if( clmNos[i] == Formatter.SYS_CNT ) {                                     // [J] 登録時の件数(1~)
523                                                                                pstmt.setString( i+1,String.valueOf( executeCount+1 ) );
524                                                                        }
525                                                                        else {
526                                                                                pstmt.setString( i+1,"" );                                              // 7.3.1.3 (2021/03/09) エラーでもよいが、空文字列をセットしておきます。
527                                                                        }
528                                                                }
529                                                                pstmt.execute();
530                                                                if( commitBatch > 0 && ( executeCount%commitBatch == 0 ) ) {
531                                                                        conn.commit();                  // 5.1.9.0 (2010/08/01) Transaction 対応
532                                                                        commitCount = executeCount;
533                                                                }
534                                                                executeCount++ ;
535                                                        }
536                                                }
537                                                catch( final SQLException ex ) {
538                                                        final String errMsg = CR + ex.getMessage()                                                      + CR
539                                                                                + " sql   =[" + sql                                                             + "]"   + CR
540                                                                                + " encode=[" + encode                                                  + "]"   + CR            // 6.6.0.1 (2016/12/07)
541                                                                                + " keys  =[" + StringUtil.array2csv( clmKeys ) + "]"   + CR
542                                                                                + " vals  =[" + StringUtil.array2csv( vals )    + "]"   + CR
543                                                                                + " 行番号=["    + (rowNo+1)         + "]"
544                                                                                + " 登録件数=["  + commitCount       + "]"  + CR
545                                                                                + " ErrorCode=[" + ex.getErrorCode() + "]"
546                                                                                + " State=["     + ex.getSQLState()  + "]"  + CR ;
547                                                        jspPrint( errMsg );
548                                                        tran.rollback();                                                                // 6.3.6.1 (2015/08/28) Transaction で処理
549                                        //              tran.close();                                                                   // 6.3.6.1 (2015/08/28) Transaction で処理
550                                                        sqlError = true;                                                                // 6.3.6.1 (2015/08/28) DirectTableInsertTag でSQLException発生時
551                                                        throw new HybsSystemException( errMsg,ex );
552                                                }
553                                        }
554                                        else {
555                                                throw new HybsOverflowException( maxRowCount ); // 6.4.1.1 (2016/01/16)
556                                        }
557                                }
558
559                                /**
560                                 * 新しくEXCELのシートを処理する際に、シート名をセットするときに呼び出されます。
561                                 *
562                                 * @og.rev 7.3.1.1 (2021/02/25) 現在実行中のシート名を、"DB.SHEET_NAME" キーでリクエストにセットする。
563                                 *
564                                 * @param   sheetName   現在実行中のシート名
565                                 */
566                                @Override
567                                public void shtName( final String sheetName ) {
568                                        setRequestAttribute( "DB.SHEET_NAME" , sheetName );
569                                }
570                        };
571
572                        final TableReader reader = HybsSystem.newInstance( "TableReader_" , readerClass );      // 3.5.5.3 (2004/04/09)
573
574                        reader.setSeparator( separator );
575                        reader.setColumns( columns );                                   // 3.5.4.5 (2004/01/23) 、6.2.0.0 (2015/02/27) 削除
576                        reader.setUseNumber( useNumber );                               // 3.7.0.5 (2005/04/11)
577                        reader.setSkipRowCount( skipRowCount );                 // 5.1.6.0 (2010/05/01)
578                        reader.setDebug( isDebug() );                                   // 5.5.7.2 (2012/10/09) デバッグ情報を出力するかどうかを指定
579                        // 6.2.0.0 (2015/02/27) EXCELでない場合でも、メソッドは呼び出す。(空振りします)
580                        reader.setSheetName( sheetName );                               // 3.5.4.2 (2003/12/15)
581                        reader.setSheetNos( sheetNos );                                 // 5.5.7.2 (2012/10/09) 複数シートを指定できるようにシート番号を指定できるようにする。
582                        reader.setSheetConstData( sheetConstKeys,sheetConstAdrs ) ;             // 5.5.8.2 (2012/11/09) 固定値となるカラム名、アドレスの指定
583                        reader.setNullBreakClm( nullBreakClm ) ;                // 5.5.8.2 (2012/11/09) 取込み条件/Sheet BREAK条件
584                        reader.setNullSkipClm( nullSkipClm ) ;                  // 6.2.3.0 (2015/05/01) 行読み飛ばし
585                        // 6.6.0.1 (2016/12/07) setColumnActionListener は、内部処理が走るため、他の設定が終わってから呼び出す。
586                        reader.setColumnActionListener( listener );             // 6.2.2.0 (2015/03/27)
587
588                        reader.readDBTable( file,encode );                              // 6.2.0.0 (2015/02/27) 追加
589
590                        listener.end();                                                                 // 6.3.6.1 (2015/08/28) tran.commit() は、この、end メソッドで行われる。
591                }
592        }
593
594                // 6.3.6.1 (2015/08/28) Transaction で処理
595
596        /**
597         * 【TAG】(通常は使いません)検索時のDB接続IDを指定します(初期値:DEFAULT)。
598         *
599         * @og.tag
600         *   検索時のDB接続IDを指定します。初期値は、DEFAULT です。
601         *
602         * @param       id データベース接続ID
603         */
604        public void setDbid( final String id ) {
605                dbid = nval( getRequestParameter( id ),dbid );
606        }
607
608        /**
609         * 【TAG】指定数毎にコミットを発行します(初期値:0 終了までコミットしません)。
610         *
611         * @og.tag
612         * 通常は、全ての処理が正常に終了するか、なにもしないか(トランザクション)
613         * を判断すべきで、途中でのコミットはしません。
614         * しかし、場合によって、件数が異常に多い場合や、再実行可能な場合は、
615         * 途中でコミットして、都度、処理できるものだけを処理してしまうという方法があります。
616         * また、ロールバックエリアの関係などで、データ量が多い場合に、処理時間が異常に
617         * 長くなる事があり、指定件数ごとのコミット機能を用意しています。
618         * 0 に設定すると、終了までコミットしません。初期値は、0 です。
619         *
620         * @param   cmtBat コミットを発行する行数 (初期値:0)
621         */
622        public void setCommitBatch( final String cmtBat ) {
623                commitBatch = nval( getRequestParameter( cmtBat ),commitBatch );
624        }
625
626        /**
627         * 【TAG】BODYのSQL文を指定しない場合に使用するテーブルIDを指定します。
628         *
629         * @og.tag
630         * 通常は、BODYに記述したSQL文を実行しますが、テーブルIDを指定すると、
631         * INSERT用のSQL文を自動作成します。
632         * その場合は、BODYのSQL文は設定不要です。
633         * また、FILE.NAME という文字列を指定した場合は、file1 に指定した
634         * ファイル名から、拡張子を取り除いた名称をテーブル名として使用します。
635         *
636         * @og.rev 6.2.3.0 (2015/05/01) table属性追加
637         *
638         * @param   tbl テーブルID
639         */
640        public void setTable( final String tbl ) {
641                table = nval( getRequestParameter( tbl ),table );
642        }
643
644        /**
645         * 【TAG】処理時間を表示する TimeView を表示するかどうか[true:する/false:しない]を指定します
646         *              (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。
647         *
648         * @og.tag
649         * true に設定すると、処理時間を表示するバーイメージが表示されます。
650         * これは、DB検索、APサーバー処理、画面表示の各処理時間をバーイメージで
651         * 表示させる機能です。処理時間の目安になります。
652         * (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。
653         *
654         * @og.rev 6.3.6.0 (2015/08/16) useTimeView の初期値を、VIEW_USE_TIMEBAR にする。
655         *
656         * @param       flag    処理時間を表示 [true:する/false:しない]
657         */
658        public void setUseTimeView( final String flag ) {
659                useTimeView = nval( getRequestParameter( flag ),useTimeView );
660        }
661
662        /**
663         * このオブジェクトの文字列表現を返します。
664         * 基本的にデバッグ目的に使用します。
665         *
666         * @return このクラスの文字列表現
667         * @og.rtnNotNull
668         */
669        @Override
670        public String toString() {
671                return ToString.title( this.getClass().getName() )
672                                .println( "VERSION"                     ,VERSION                )
673                                .println( "dbid"                        ,dbid                   )
674        //                      .println( "clmKeys"                     ,clmKeys                )
675                                .println( "sql"                         ,sql                    )
676                                .println( "commitBatch"         ,commitBatch    )
677                                .println( "Other..."            ,getAttributes().getAttribute() )
678                                .fixForm().toString() ;
679        }
680}