001/* 002 * Copyright (c) 2009 The openGion Project. 003 * 004 * Licensed under the Apache License, Version 2.0 (the "License"); 005 * you may not use this file except in compliance with the License. 006 * You may obtain a copy of the License at 007 * 008 * http://www.apache.org/licenses/LICENSE-2.0 009 * 010 * Unless required by applicable law or agreed to in writing, software 011 * distributed under the License is distributed on an "AS IS" BASIS, 012 * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, 013 * either express or implied. See the License for the specific language 014 * governing permissions and limitations under the License. 015 */ 016package org.opengion.hayabusa.taglib; 017 018import org.opengion.fukurou.system.OgRuntimeException ; // 6.4.2.0 (2016/01/29) 019import org.opengion.hayabusa.common.HybsSystem; 020import org.opengion.hayabusa.common.HybsSystemException; 021import org.opengion.hayabusa.common.HybsOverflowException; // 6.2.5.0 (2015/06/05) 022import org.opengion.hayabusa.resource.GUIInfo; 023import org.opengion.hayabusa.db.DBColumn; 024import org.opengion.hayabusa.db.ColumnActionListener; // 6.2.2.0 (2015/03/27) 025import org.opengion.hayabusa.io.TableReader; 026import org.opengion.fukurou.db.Transaction; 027import org.opengion.fukurou.util.ErrorMessage; // 6.2.5.0 (2015/06/05) 028import org.opengion.fukurou.util.StringUtil; 029import org.opengion.fukurou.system.Closer ; 030import org.opengion.fukurou.util.ToString; // 6.1.1.0 (2015/01/17) 031import org.opengion.fukurou.util.FileInfo; // 6.2.3.0 (2015/05/01) 032import org.opengion.fukurou.model.Formatter; 033import org.opengion.fukurou.model.ArrayDataModel; 034 035import static org.opengion.fukurou.util.StringUtil.nval ; 036import static org.opengion.fukurou.system.HybsConst.BR; // 6.1.0.0 (2014/12/26) refactoring 037 038import java.sql.Connection; 039import java.sql.PreparedStatement; 040import java.sql.SQLException; 041 042import java.io.File; 043import java.util.List ; // 7.3.0.0 (2021/01/06) 044 045/** 046 * 指定のファイルを直接データベースに登録するデータ入力タグです。 047 * 048 * 通常の readTable などは、DBTableModelオブジェクトを介して全件メモリに 049 * ロードしてから表示させる為、大量データ処理ができません。 050 * このタグでは、直接ファイルを読み取りながらデータベース登録するので 051 * 大量データをバッチ的に登録する場合に使用します。 052 * 053 * 読み取るファイルは、先頭(または実データが現れるまでに) #NAME 行が必要です。 054 * これは、ファイルデータのカラム名を指定しています。また、columns 属性を使用すれば、 055 * ファイルの#NAME 行より優先して(つまり存在していなくても良い)データのカラム名を 056 * 指定することが出来ます。 057 * この#NAME 行は、ファイルのセパレータと無関係に必ずタブ区切りで用意されています。 058 * タグのBODY部に、実行するSQL文を記述します。 059 * このSQL文は、 060 * INSERT INTO GE41 (CLM,NAME_JA,SYSTEM_ID,FGJ,DYSET) 061 * VALUES ([CLM],[NAME_JA],[SYSTEM_ID],'1','{@USER.YMDH}') 062 * と、いう感じで、ファイルから読み込んだ値は、[カラム名]に割り当てられます。 063 * もちろん、通常の固定値(FGJに'1'をセット)や、リクエスト変数(DYSETの{@USER.YMDH}) 064 * なども使用できます。 065 * 066 * ※ 6.2.3.0 (2015/05/01) 067 * BODY部にSQL文を記述しない場合は、table 属性に、INSERTするテーブルIDを指定します。 068 * 069 * ※ 6.2.4.0 (2015/05/15) 070 * omitNames に、WRITABLE と ROWID を、強制的に含めます(無条件)。 071 * 072 * ※ 7.3.1.3 (2021/03/09) DB.NAMES , DB.ORGNAMES 073 * #NAME や columns で指定したカラムは、{@DB.NAMES} で取り出すことが可能です。 074 * ファイルにかかれた、オリジナルの #NAME は、{@DB.ORGNAMES} で取り出すことが可能です。 075 * 076 * ※ このタグは、Transaction タグの対象です。 077 * 078 * @og.formSample 079 * ●形式:<og:directTableInsert filename="[・・・]" ・・・ >INSERT INTO ・・・ </og:directTableInsert > 080 * ●body:あり(EVAL_BODY_BUFFERED:BODYを評価し、{@XXXX} を解析します) 081 * 082 * ●Tag定義: 083 * <og:directTableInsert 084 * readerClass 【TAG】実際に読み出すクラス名の略称(TableReader_**** の ****)をセットします 085 * (初期値:TABLE_READER_DEFAULT_CLASS[={@og.value SystemData#TABLE_READER_DEFAULT_CLASS}]) 086 * 専 commitBatch 【TAG】指定数毎にコミットを発行します(初期値:0 終了までコミットしません) 087 * 専 dbid 【TAG】(通常は使いません)検索時のDB接続IDを指定します(初期値:DEFAULT) 088 * 専 table 【TAG】BODYのSQL文を指定しない場合に使用するテーブルIDを指定します 089 * command 【TAG】コマンド (NEW,RENEW)をセットします(初期値:NEW) 090 * fileURL 【TAG】読取元ディレクトリ名を指定します(初期値:FILE_URL) 091 * filename 【TAG】ファイルを作成するときのファイル名をセットします (初期値:FILE_FILENAME[=file.xls]) 092 * encode 【TAG】ファイルを作成するときのファイルエンコーディング名をセットします(初期値:FILE_ENCODE) 093 * skipRowCount 【TAG】(通常は使いません)データの読み飛ばし件数を設定します 094 * maxRowCount 【TAG】読取時の最大取り込み件数をセットします (初期値:0:[無制限]) 095 * errRowCount 【TAG】読取時の最大エラー件数をセットします (初期値:{@og.value ReadTableTag#ERROR_ROW_COUNT})(0:[無制限]) 096 * separator 【TAG】可変長ファイルを作成するときの項目区切り文字をセットします 097 * columns 【TAG】読取元ファイルのカラム列を、外部(タグ)よりCSV形式で指定します 098 * omitNames 【TAG】読取対象外のカラム列を、外部(タグ)よりCSV形式で指定します 099 * modifyType 【TAG】ファイル取り込み時の モディファイタイプ(A(追加),C(更新),D(削除))を指定します 100 * displayMsg 【TAG】query の結果を画面上に表示するメッセージIDを指定します(初期値:VIEW_DISPLAY_MSG[={@og.value SystemData#VIEW_DISPLAY_MSG}])) 101 * overflowMsg 【TAG】読取データが最大検索数をオーバーした場合に表示するメッセージリソースIDを指定します (初期値:MSG0007[検索結果が、制限行数を超えましたので、残りはカットされました]) 102 * notfoundMsg 【TAG】検索結果がゼロ件の場合に表示するメッセージリソースIDを指定します(初期値:MSG0077[対象データはありませんでした]) 103 * ※ sheetName 【TAG】EXCELファイルを読み込むときのシート名を設定します(初期値:指定なし) 104 * ※ sheetNos 【TAG】EXCELファイルを読み込むときのシート番号を複数設定できます(初期値:0) 105 * ※ sheetConstKeys 【TAG】EXCELファイルを読み込むときの固定値となるカラム名(CSV形式) 106 * ※ sheetConstAdrs 【TAG】EXCELファイルを読み込むときの固定値となるアドレス(行-列,行-列,・・・) 107 * nullBreakClm 【TAG】カラム列に NULL が現れた時点で読取を中止します(複数Sheetの場合は、次のSheetを読みます)。 108 * nullSkipClm 【TAG】カラム列に NULL が現れたレコードは読み飛ばします。 109 * useNumber 【TAG】行番号情報を、使用している/していない[true/false]を指定します(初期値:true) 110 * useRepeatClms 【TAG】読取処理で横持ちデータの繰り返しが存在する場合に、trueを指定します(初期値:false) 7.3.0.0 (2021/01/06) 111 * useRenderer 【TAG】読取処理でKEY:VAL形式のコードリソースから、KEYを取り出す処理を行うかどうかを指定します(初期値:USE_TABLE_READER_RENDERER[=false]) 112 * adjustColumns 【TAG】読取元ファイルのデータ変換を行うカラム列をカンマ指定します 113 * checkColumns 【TAG】読取元ファイルの整合性チェックを行うカラム列をカンマ指定します 114 * useStrict 【TAG】整合性チェック時に、厳密にチェックするかどうか[true/false]を指定します(初期値:true) 7.3.2.0 (2021/03/19) 115 * nullCheck 【TAG】NULL チェックすべきカラム列をCSV形式(CSV形式)で指定します 116 * matchKeys 【TAG】レコードの読取条件指定時のカラム列をCSV形式で指定します 6.4.6.0 (2016/05/27) 117 * matchVals 【TAG】レコードの読取条件指定時のカラム列に対応する正規表現データをCSV形式で指定します 6.4.6.0 (2016/05/27) 118 * language 【TAG】タグ内部で使用する言語コード[ja/en/zh/…]を指定します 119 * stopZero 【TAG】読込件数が0件のとき処理を続行するかどうか[true/false]を指定します(初期値:false[続行する]) 120 * mainTrans 【TAG】(通常は使いません)タグで処理される処理がメインとなるトランザクション処理かどうかを指定します(初期値:false) 121 * tableId 【TAG】(通常は使いません)sessionから所得する DBTableModelオブジェクトの ID 122 * scope 【TAG】キャッシュする場合のスコープ[request/page/session/application]を指定します(初期値:session) 123 * useTimeView 【TAG】処理時間を表示する TimeView を表示するかどうかを指定します 124 * (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。 125 * useSLabel 【TAG】7.0.7.0 (2019/12/13) エラーメッセージにSLABELを利用するかどうか[true/false]を指定します(初期値:false) 126 * useLocal 【TAG】システム定数でクラウド設定されていても、クラウド環境を使用しない場合、trueを指定します(初期値:false) 8.0.1.0 (2021/10/29) 127 * caseKey 【TAG】このタグ自体を利用するかどうかの条件キーを指定します(初期値:null) 5.7.7.2 (2014/06/20) 128 * caseVal 【TAG】このタグ自体を利用するかどうかの条件値を指定します(初期値:null) 5.7.7.2 (2014/06/20) 129 * caseNN 【TAG】指定の値が、null/ゼロ文字列 でない場合(Not Null=NN)は、このタグは使用されます(初期値:判定しない) 5.7.7.2 (2014/06/20) 130 * caseNull 【TAG】指定の値が、null/ゼロ文字列 の場合は、このタグは使用されます(初期値:判定しない) 5.7.7.2 (2014/06/20) 131 * caseIf 【TAG】指定の値が、true/TRUE文字列の場合は、このタグは使用されます(初期値:判定しない) 132 * debug 【TAG】デバッグ情報を出力するかどうか[true/false]を指定します(初期値:false) 133 * > ... Body ... 134 * </og:directTableInsert> 135 * 136 * ●使用例 137 * <og:directTableInsert 138 * dbid = "ORCL" 接続データベースID(初期値:DEFAULT) 139 * separator = "," ファイルの区切り文字(初期値:タブ) 140 * fileURL = "{@USER.ID}" 読み取り元ディレクトリ名 141 * filename = "{@filename}" 読み取り元ファイル名 142 * encode = "Shift_JIS" 読み取り元ファイルエンコード名 143 * displayMsg = "MSG0040" 登録完了後のメッセージ 144 * columns = "CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG" 145 * #NAME の代わりに使用するカラム列名 146 * commitBatch = "100" この件数ずつコミットを発行(初期値:無制限) 147 * useColumnCheck = "true" カラムチェックを行うかどうか(初期値:false) 148 * useColumnAdjust = "true" カラム変換を行うかどうか(初期値:false) 149 * nullCheck = "CLM,SYSTEM_ID" NULLチェックを実行します。 150 * > 151 * INSERT INTO GE41 152 * (CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG, 153 * FGJ,DYSET,DYUPD,USRSET,USRUPD,PGUPD) 154 * VALUES 155 * ([CLM],[NAME_JA],[LABEL_NAME],[KBSAKU],[SYSTEM_ID],[LANG], 156 * '1','{@USER.YMDH}','{@USER.YMDH}','{@USER.ID}','{@USER.ID}','{@GUI.KEY}') 157 * </og:directTableInsert > 158 * 159 * @og.group ファイル入力 160 * 161 * @version 4.0 162 * @author Kazuhiko Hasegawa 163 * @since JDK5.0, 164 */ 165public class DirectTableInsertTag extends ReadTableTag { 166 /** このプログラムのVERSION文字列を設定します。 {@value} */ 167 private static final String VERSION = "7.0.7.0 (2019/12/13)" ; 168 private static final long serialVersionUID = 707020191213L ; 169 170 // 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します(WRITABLE,ROWID) 171 private static final String DEFAULT_OMIT = "WRITABLE,ROWID" ; 172 173 // 4.0.0.0 (2007/10/10) dbid の初期値を、"DEFAULT" から null に変更 174 private String dbid ; 175 private int commitBatch ; // コミットするまとめ件数 176 private String sql ; 177 private String table ; // 6.2.3.0 (2015/05/01) 178 private long dyStart ; // 実行時間測定用のDIV要素を出力します。 179 private boolean useTimeView = HybsSystem.sysBool( "VIEW_USE_TIMEBAR" ); // 6.3.6.0 (2015/08/16) 180 private boolean sqlError ; // 8.1.1.0 (2022/02/04) sqlError フラグでの判定は、DirectTableInsertTag のみで行います。 181 182 /** 183 * デフォルトコンストラクター 184 * 185 * @og.rev 6.4.2.0 (2016/01/29) PMD refactoring. Each class should declare at least one constructor. 186 */ 187 public DirectTableInsertTag() { super(); } // これも、自動的に呼ばれるが、空のメソッドを作成すると警告されるので、明示的にしておきます。 188 189 /** 190 * Taglibの開始タグが見つかったときに処理する doStartTag() を オーバーライドします。 191 * 192 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 193 * @og.rev 6.2.3.0 (2015/05/01) table属性追加。BODYのSQL文が無くても、table属性で自動生成します。 194 * @og.rev 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します。 195 * 196 * @return 後続処理の指示( EVAL_BODY_BUFFERED ) 197 */ 198 @Override 199 public int doStartTag() { 200 dyStart = System.currentTimeMillis(); 201 202 // 6.2.4.0 (2015/05/15) 無条件でOMITする名称を指定します。 203 addOmitNames( DEFAULT_OMIT ); 204 205 // 6.2.3.0 (2015/05/01) table属性追加 206 // 6.4.1.1 (2016/01/16) PMD refactoring. A method should have only one exit point, and that should be the last statement in the method 207 return table == null || table.isEmpty() 208 ? EVAL_BODY_BUFFERED // Body を評価する。( extends BodyTagSupport 時) 209 : SKIP_BODY ; // Body を評価しない 210 } 211 212 /** 213 * Taglibのタグ本体を処理する doAfterBody() を オーバーライドします。 214 * 215 * @og.rev 3.6.0.2 (2004/10/04) SQL文の [カラム] 対応とパーサー機能追加 216 * @og.rev 3.8.6.3 (2006/11/30) SQL 文の前後のスペースを取り除きます。 217 * @og.rev 6.2.3.0 (2015/05/01) table属性追加。BODYのSQL文が無くても、table属性で自動生成します。 218 * 219 * @return 後続処理の指示(SKIP_BODY) 220 */ 221 @Override 222 public int doAfterBody() { 223 sql = getBodyString(); 224 if( sql == null || sql.isEmpty() || sql.trim().isEmpty() ) { 225 final String errMsg = "table属性を指定しない場合は、BODY 部の登録用 Insert/Update文は、必須です。"; 226 throw new HybsSystemException( errMsg ); 227 } 228 229 return SKIP_BODY ; // Body を評価しない 230 } 231 232 /** 233 * #doEndTag() の後続処理を記述します。 234 * 235 * これは、サブクラスで、DBTableModel以外の処理を行う場合に、 236 * 処理内容を分けるために用意します。 237 * 238 * @og.rev 6.2.2.0 (2015/03/27) #afterEnd() メソッド 新規作成。 239 * @og.rev 6.2.5.0 (2015/06/05) AutoReaderの仕様変更。checkColumns エラー処理が抜けていたので、追加します。 240 * @og.rev 7.0.7.0 (2019/12/13) useSLabel 属性を追加。 241 * 242 * @return 後続処理の指示 243 */ 244 @Override 245 protected int afterEnd() { 246 // 6.2.5.0 (2015/06/05) エラー処理の追加 247 final ErrorMessage errMsg = clmAct.getErrorMessage(); 248 if( !errMsg.isOK() ) { 249// jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource() ) ); 250 jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource(),useSLabel ) ); // 7.0.7.0 (2019/12/13) 251 return SKIP_PAGE ; 252 } 253 254 // 実行件数の表示 255 // 4.0.0 (2005/11/30) 出力順の変更。一番最初に出力します。 256 if( displayMsg != null && displayMsg.length() > 0 ) { 257 final String status = executeCount + getResource().getLabel( displayMsg ) ; 258 jspPrint( status + BR ); 259 } 260 261 // 5.7.6.2 (2014/05/16) 検索結果の件数を、"DB.COUNT" キーでリクエストにセットする。 262 setRequestAttribute( "DB.COUNT" , String.valueOf( executeCount ) ); 263 264 // 5.7.6.2 (2014/05/16) 件数0件かつ stopZero = true 265 if( executeCount == 0 && stopZero ) { return SKIP_PAGE; } 266 267 final long dyTime = System.currentTimeMillis()-dyStart; 268 269 // 4.0.0 (2005/01/31) セキュリティチェック(データアクセス件数登録) 270 final GUIInfo guiInfo = (GUIInfo)getSessionAttribute( HybsSystem.GUIINFO_KEY ); 271 if( guiInfo != null ) { guiInfo.addWriteCount( executeCount,dyTime,sql ); } 272 273 if( useTimeView ) { // 6.3.6.0 (2015/08/16) 274 // 時間測定用の DIV 要素を出力 275 jspPrint( "<div id=\"queryTime\" value=\"" + (dyTime) + "\"></div>" ); // 3.5.6.3 (2004/07/12) 276 } 277 return EVAL_PAGE ; 278 } 279 280 /** 281 * タグリブオブジェクトをリリースします。 282 * キャッシュされて再利用されるので、フィールドの初期設定を行います。 283 * 284 * @og.rev 3.6.0.2 (2004/10/04) useColumnCheck,useColumnAdjust 属性追加 285 * @og.rev 3.8.0.2 (2005/06/30) nullCheck 属性追加 286 * @og.rev 4.0.0.0 (2007/10/10) dbid の初期値を、"DEFAULT" から null に変更 287 * @og.rev 5.5.7.1 (2012/10/05) skipRowCount追加 288 * @og.rev 5.7.6.2 (2014/05/16) stopZero属性追加 289 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 290 * @og.rev 6.2.3.0 (2015/05/01) table属性追加 291 */ 292 @Override 293 protected void release2() { 294 super.release2(); 295 dbid = null; 296 commitBatch = 0; // コミットするまとめ件数 297 table = null; // 6.2.3.0 (2015/05/01) 298 useTimeView = HybsSystem.sysBool( "VIEW_USE_TIMEBAR" ); // 6.3.6.0 (2015/08/16) 299 } 300 301 /** 302 * ファイルオブジェクト より読み込み、データベースに書き込みます。 303 * 304 * @og.rev 3.6.0.2 (2004/10/04) カラムオブジェクトのDBType属性の整合性チェック 305 * @og.rev 3.8.0.2 (2005/06/30) nullチェック確認 306 * @og.rev 3.8.5.1 (2006/05/08) 取込データが name 列より少ない場合の対応を追加 307 * @og.rev 3.8.7.0 (2006/12/15) アクセスログ取得の為,ApplicationInfoオブジェクトを設定 308 * @og.rev 4.0.0.0 (2005/01/31) CheckColumnDataクラス static 化、引数にResourceManager追加 309 * @og.rev 4.0.0.1 (2007/12/03) try ~ catch ~ finally をきちんと行う。 310 * @og.rev 5.1.9.0 (2010/08/01) Transaction 対応 311 * @og.rev 5.2.2.0 (2010/11/01)) ""で囲われているデータに改行が入っていた場合の対応 312 * @og.rev 5.3.7.0 (2011/07/01) TransactionReal の引数変更 313 * @og.rev 5.3.8.0 (2011/08/01) pstmt.setObject で、useParamMetaData の判定を避けるため、pstmt.setString で代用(PostgreSQL対応) 314 * @og.rev 5.5.7.1 (2012/10/05) omitFirstLine対応 315 * @og.rev 5.7.0.3 (2013/11/22) BufferedReaderのclose処理をこのメソッド内のfinallyで行う 316 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 317 * @og.rev 6.2.3.0 (2015/05/01) 行読み飛ばし nullSkipClm追加 318 * @og.rev 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。 319 * @og.rev 6.2.5.0 (2015/06/05) AutoReaderの仕様変更。checkColumns エラー処理が抜けていたので、追加します。 320 * @og.rev 6.3.6.1 (2015/08/28) Transaction でAutoCloseableを使用したtry-with-resources構築に対応。 321 * @og.rev 6.4.3.3 (2016/03/04) HybsSystem.newInstance(String,String) への置き換え。 322 * @og.rev 6.6.0.1 (2016/12/07) エンコードが複数ある場合、SQLのパースで、上書きするとカラム名が取れないバグ修正。 323 * @og.rev 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする 324 * 325 * @param file ファイルオブジェクト 326 */ 327 @Override 328 protected void create( final File file ) { 329 330 // 6.3.6.1 (2015/08/28) Transaction で処理 331 try( Transaction tran = getTransaction() ) { 332 /** 333 * ColumnActionListenerインターフェースの内部無名クラス 334 * 335 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 336 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理 337 * 338 * @param names カラム名配列 339 */ 340 final ColumnActionListener listener = new ColumnActionListener() { 341 private DBColumn[] dbClms ; 342 private String[] clmKeys ; // SQL文の[カラム名]配列 343 private int commitCount ; 344 345 private int[] clmNos ; 346 private int clmNosLen ; 347 348 private PreparedStatement pstmt ; 349 private final Connection conn = tran.getConnection( dbid ); // 6.3.6.1 (2015/08/28) 350 351 /** 352 * 一連の作業終了時に呼ばれます。 353 * 354 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 355 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理 356 * 357 */ 358 @Override 359 public void end() { 360 Closer.stmtClose( pstmt ); 361 tran.commit(); // 6.3.6.1 (2015/08/28) ここでは常にcommit()させる。 362 } 363 364 /** 365 * カラム名の配列が設定された場合に、呼び出されます。 366 * 367 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応。 368 * @og.rev 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。 369 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理 370 * @og.rev 6.4.1.1 (2016/01/16) HybsOverflowException をthrow するとき、最大件数を引数に渡す。 371 * @og.rev 6.4.3.4 (2016/03/11) Formatterに新しいコンストラクターを追加する。 372 * @og.rev 6.6.0.1 (2016/12/07) エンコードが複数ある場合、SQLのパースで、上書きするとカラム名が取れないバグ修正。 373 * @og.rev 6.9.5.0 (2018/04/23) カラム名が存在しない場合に、Exception を throw するかどうかを指定可能にする。 374 * @og.rev 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする 375 * @og.rev 7.3.1.1 (2021/02/25) カラム列を、"DB.NAMES" キーでリクエストにセットする。 376 * 377 * @param names カラム名配列 378 */ 379 @Override 380 public void columnNames( final String[] names ) { 381 String pstSql = null; // 6.6.0.1 (2016/12/07) 382 383 final String[] nms = clmAct.makeNames( names ); 384 385 // 6.4.1.1 (2016/01/16) PMD refactoring. Avoid if (x != y) ..; else ..; 386 if( table == null || table.isEmpty() ) { 387 if( sql != null && !sql.isEmpty() ) { 388// final ArrayDataModel nmdata = new ArrayDataModel( nms ); 389 final ArrayDataModel nmdata = new ArrayDataModel( nms,true ); // 6.9.5.0 (2018/04/23) カラム名が存在しない場合に、Exception を throw する 390 final Formatter format = new Formatter( nmdata,sql.trim() ); // 6.4.3.4 (2016/03/11) 391 clmNos = format.getClmNos(); // 指定されたセルのカラム番号。存在しなければ、Exception を throw する 392 clmNosLen = clmNos.length ; 393 clmKeys = format.getClmKeys(); 394 pstSql = format.getQueryFormatString(); // 6.6.0.1 (2016/12/07) 395 } 396 } 397 else { 398 if( "FILE.NAME".equals( table ) ) { 399 table = FileInfo.getNAME( file ); 400 } 401 402 clmNosLen = nms.length; 403 clmNos = new int[clmNosLen]; 404 clmKeys = nms; 405 406 final StringBuilder buf = new StringBuilder( BUFFER_MIDDLE ); 407 buf.append( "INSERT INTO " ).append( table ).append( " ( " ) 408 .append( String.join( ",",nms ) ) 409 .append( " ) VALUES ( ?" ); 410 clmNos[0] = 0; 411 for( int i=1; i<clmNosLen; i++ ) { 412 clmNos[i] = i; 413 buf.append( ",?" ); 414 } 415 buf.append( ')' ); 416 pstSql = buf.toString(); // 6.6.0.1 (2016/12/07) 417 } 418 419 try { 420 pstmt = conn.prepareStatement( pstSql ); // 6.6.0.1 (2016/12/07) 421 } 422 catch( final SQLException ex ) { 423 final String errMsg = CR + ex.getMessage() + CR 424 + " sql =[" + sql + "]" + CR 425 + " names =[" + StringUtil.array2csv( names ) + "]" + CR // 6.6.0.1 (2016/12/07) 426 + " encode=[" + encode + "]" + CR // 6.6.0.1 (2016/12/07) 427 + " ErrorCode=[" + ex.getErrorCode() + "]" 428 + " State=[" + ex.getSQLState() + "]" + CR ; 429 jspPrint( errMsg ); 430 tran.rollback(); // 6.3.6.1 (2015/08/28) Transaction で処理 431 // tran.close(); // 6.3.6.1 (2015/08/28) Transaction で処理 432 sqlError = true; // 6.3.6.1 (2015/08/28) DirectTableInsertTag でSQLException発生時 433 throw new HybsSystemException( errMsg,ex ); // 6.2.4.2 (2015/05/29) refactoring 434 } 435 436 final StringBuilder nmsBuf = new StringBuilder( BUFFER_MIDDLE ); // 7.3.1.1 (2021/02/25) 437 dbClms = new DBColumn[nms.length]; 438 for( int no=0; no<nms.length; no++ ) { 439 nmsBuf.append( ',' ).append( nms[no] ); // 7.3.1.1 (2021/02/25) 440 dbClms[no] = getDBColumn( nms[no] ); 441 } 442 443 if( nmsBuf.length() > 1 ) { // 7.3.1.1 (2021/02/25) 最初のカンマを削除して、DB.NAMES で登録する。 444 setRequestAttribute( "DB.NAMES" , nmsBuf.substring(1) ); 445 } 446 447 // 6.2.4.2 (2015/05/29) executeCount の設定がおかしい。DirectTableInsertTagでは、初期値が -1 のため、件数が1件少なくなっていた。 448 // 7.0.4.3 (2019/07/15) AutoReaderでencode指定の場合、columnNamesを複数回通ることがあるため、executeCountは都度クリアする 449// executeCount++ ; 450 executeCount = 0; // 7.0.4.3 (2019/07/15) 451 } 452 453 /** 454 * #NAME のオリジナルカラム名配列がそろった段階で、イベントが発生します。 455 * 456 * @og.rev 7.3.1.3 (2021/03/09) #NAMEのオリジナルを取得できるようにします。 457 * 458 * @param names カラム名配列 459 */ 460 @Override 461 public void originalNames( final String[] names ) { 462 if( names != null && names.length > 0 ) { 463 final StringBuilder nmsBuf = new StringBuilder( BUFFER_MIDDLE ); 464 for( int no=0; no<names.length; no++ ) { 465 nmsBuf.append( ',' ).append( names[no] ); 466 } 467 468 if( nmsBuf.length() > 1 ) { // 7.3.1.1 (2021/02/25) 最初のカンマを削除して、DB.NAMES で登録する。 469 setRequestAttribute( "DB.ORGNAMES" , nmsBuf.substring(1) ); 470 } 471 } 472 } 473 474 /** 475 * 1行分のデータが設定された場合に、呼び出されます。 476 * 477 * @og.rev 6.2.2.0 (2015/03/27) ColumnActionListener 対応 478 * @og.rev 6.2.5.0 (2015/06/05) 読み取り件数オーバーフロー時、HybsOverflowException を throw します 479 * @og.rev 6.3.6.1 (2015/08/28) Transaction で処理 480 * @og.rev 6.3.9.0 (2015/11/06) コンストラクタで初期化されていないフィールドを null チェックなしで利用している(findbugs) 481 * @og.rev 6.4.6.0 (2016/05/27) レコードの読取条件指定を追加。条件に一致しなければ、null が返されます 482 * @og.rev 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応 483 * @og.rev 7.3.1.3 (2021/03/09) [J] で、登録件数(1~) を表現する。 484 * 485 * @param vals 文字列値の1行分の配列 486 * @param rowNo 行番号(0~) 487 */ 488 @Override 489 public void values( final String[] vals, final int rowNo ) { 490 if( maxRowCount <= 0 || executeCount <= maxRowCount ) { // 読み取り件数無制限か、最大件数以下の場合 491 // 6.3.9.0 (2015/11/06) コンストラクタで初期化されていないフィールドを null チェックなしで利用している(findbugs) 492 // 6.4.1.1 (2016/01/16) PMD refactoring. 処理の順番を入れ替えます。 493 if( pstmt == null || clmNos == null ) { 494 final String errMsg = "#columnNames(String[])を先に実行しておいてください。" ; 495 throw new OgRuntimeException( errMsg ); 496 } 497 498 try { 499 // 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応。 500 final List<String[]> valsList = clmAct.clmAction( vals , dbClms , rowNo ); // この処理結果が、getErrorMessage() に反映するので、移動不可 501// final String[] newVals = clmAct.clmAction( vals , dbClms , rowNo ); // この処理結果が、getErrorMessage() に反映するので、移動不可 502 503 // 6.2.5.0 (2015/06/05) エラー発生時は、以下の処理は行いません。 504 // 6.4.6.0 (2016/05/27) レコードの読取条件指定を追加。条件に一致しなければ、null が返されます。 505// if( newVals == null || !clmAct.getErrorMessage().isOK() || sqlError ) { return; } // 6.3.6.1 (2015/08/28) 506 if( valsList.isEmpty() || !clmAct.getErrorMessage().isOK() || sqlError ) { return; } // 7.3.0.0 (2021/01/06) 507 508 // 7.3.0.0 (2021/01/06) 横持ちデータの繰り返し対応。 509 for( final String[] newVals : valsList ) { 510 // ※ skipTailCount:末尾から指定行数分は取り込まない処理を入れる場合、newVals[]をListにaddしておき、指定件数以上で先頭を処理する。 511 for( int i=0; i<clmNosLen; i++ ) { 512 // 7.3.1.3 (2021/03/09) [I] で行番号を指定できるようにする。 513// pstmt.setString( i+1,newVals[clmNos[i]] ); 514 if( clmNos[i] >= 0 ) { 515 pstmt.setString( i+1,newVals[clmNos[i]] ); 516 } 517 // 7.3.1.3 (2021/03/09) ここでは行番号をセットします。 518 else if( clmNos[i] == Formatter.SYS_ROWNUM ) { // [KEY.カラム名] , [I] , [ROW.ID] は、行番号指定 519 pstmt.setString( i+1,String.valueOf( rowNo ) ); // ここでは行番号をセットします。 520 } 521 // 7.3.1.3 (2021/03/09) [J] 登録時の件数(1~) 522 else if( clmNos[i] == Formatter.SYS_CNT ) { // [J] 登録時の件数(1~) 523 pstmt.setString( i+1,String.valueOf( executeCount+1 ) ); 524 } 525 else { 526 pstmt.setString( i+1,"" ); // 7.3.1.3 (2021/03/09) エラーでもよいが、空文字列をセットしておきます。 527 } 528 } 529 pstmt.execute(); 530 if( commitBatch > 0 && ( executeCount%commitBatch == 0 ) ) { 531 conn.commit(); // 5.1.9.0 (2010/08/01) Transaction 対応 532 commitCount = executeCount; 533 } 534 executeCount++ ; 535 } 536 } 537 catch( final SQLException ex ) { 538 final String errMsg = CR + ex.getMessage() + CR 539 + " sql =[" + sql + "]" + CR 540 + " encode=[" + encode + "]" + CR // 6.6.0.1 (2016/12/07) 541 + " keys =[" + StringUtil.array2csv( clmKeys ) + "]" + CR 542 + " vals =[" + StringUtil.array2csv( vals ) + "]" + CR 543 + " 行番号=[" + (rowNo+1) + "]" 544 + " 登録件数=[" + commitCount + "]" + CR 545 + " ErrorCode=[" + ex.getErrorCode() + "]" 546 + " State=[" + ex.getSQLState() + "]" + CR ; 547 jspPrint( errMsg ); 548 tran.rollback(); // 6.3.6.1 (2015/08/28) Transaction で処理 549 // tran.close(); // 6.3.6.1 (2015/08/28) Transaction で処理 550 sqlError = true; // 6.3.6.1 (2015/08/28) DirectTableInsertTag でSQLException発生時 551 throw new HybsSystemException( errMsg,ex ); 552 } 553 } 554 else { 555 throw new HybsOverflowException( maxRowCount ); // 6.4.1.1 (2016/01/16) 556 } 557 } 558 559 /** 560 * 新しくEXCELのシートを処理する際に、シート名をセットするときに呼び出されます。 561 * 562 * @og.rev 7.3.1.1 (2021/02/25) 現在実行中のシート名を、"DB.SHEET_NAME" キーでリクエストにセットする。 563 * 564 * @param sheetName 現在実行中のシート名 565 */ 566 @Override 567 public void shtName( final String sheetName ) { 568 setRequestAttribute( "DB.SHEET_NAME" , sheetName ); 569 } 570 }; 571 572 final TableReader reader = HybsSystem.newInstance( "TableReader_" , readerClass ); // 3.5.5.3 (2004/04/09) 573 574 reader.setSeparator( separator ); 575 reader.setColumns( columns ); // 3.5.4.5 (2004/01/23) 、6.2.0.0 (2015/02/27) 削除 576 reader.setUseNumber( useNumber ); // 3.7.0.5 (2005/04/11) 577 reader.setSkipRowCount( skipRowCount ); // 5.1.6.0 (2010/05/01) 578 reader.setDebug( isDebug() ); // 5.5.7.2 (2012/10/09) デバッグ情報を出力するかどうかを指定 579 // 6.2.0.0 (2015/02/27) EXCELでない場合でも、メソッドは呼び出す。(空振りします) 580 reader.setSheetName( sheetName ); // 3.5.4.2 (2003/12/15) 581 reader.setSheetNos( sheetNos ); // 5.5.7.2 (2012/10/09) 複数シートを指定できるようにシート番号を指定できるようにする。 582 reader.setSheetConstData( sheetConstKeys,sheetConstAdrs ) ; // 5.5.8.2 (2012/11/09) 固定値となるカラム名、アドレスの指定 583 reader.setNullBreakClm( nullBreakClm ) ; // 5.5.8.2 (2012/11/09) 取込み条件/Sheet BREAK条件 584 reader.setNullSkipClm( nullSkipClm ) ; // 6.2.3.0 (2015/05/01) 行読み飛ばし 585 // 6.6.0.1 (2016/12/07) setColumnActionListener は、内部処理が走るため、他の設定が終わってから呼び出す。 586 reader.setColumnActionListener( listener ); // 6.2.2.0 (2015/03/27) 587 588 reader.readDBTable( file,encode ); // 6.2.0.0 (2015/02/27) 追加 589 590 listener.end(); // 6.3.6.1 (2015/08/28) tran.commit() は、この、end メソッドで行われる。 591 } 592 } 593 594 // 6.3.6.1 (2015/08/28) Transaction で処理 595 596 /** 597 * 【TAG】(通常は使いません)検索時のDB接続IDを指定します(初期値:DEFAULT)。 598 * 599 * @og.tag 600 * 検索時のDB接続IDを指定します。初期値は、DEFAULT です。 601 * 602 * @param id データベース接続ID 603 */ 604 public void setDbid( final String id ) { 605 dbid = nval( getRequestParameter( id ),dbid ); 606 } 607 608 /** 609 * 【TAG】指定数毎にコミットを発行します(初期値:0 終了までコミットしません)。 610 * 611 * @og.tag 612 * 通常は、全ての処理が正常に終了するか、なにもしないか(トランザクション) 613 * を判断すべきで、途中でのコミットはしません。 614 * しかし、場合によって、件数が異常に多い場合や、再実行可能な場合は、 615 * 途中でコミットして、都度、処理できるものだけを処理してしまうという方法があります。 616 * また、ロールバックエリアの関係などで、データ量が多い場合に、処理時間が異常に 617 * 長くなる事があり、指定件数ごとのコミット機能を用意しています。 618 * 0 に設定すると、終了までコミットしません。初期値は、0 です。 619 * 620 * @param cmtBat コミットを発行する行数 (初期値:0) 621 */ 622 public void setCommitBatch( final String cmtBat ) { 623 commitBatch = nval( getRequestParameter( cmtBat ),commitBatch ); 624 } 625 626 /** 627 * 【TAG】BODYのSQL文を指定しない場合に使用するテーブルIDを指定します。 628 * 629 * @og.tag 630 * 通常は、BODYに記述したSQL文を実行しますが、テーブルIDを指定すると、 631 * INSERT用のSQL文を自動作成します。 632 * その場合は、BODYのSQL文は設定不要です。 633 * また、FILE.NAME という文字列を指定した場合は、file1 に指定した 634 * ファイル名から、拡張子を取り除いた名称をテーブル名として使用します。 635 * 636 * @og.rev 6.2.3.0 (2015/05/01) table属性追加 637 * 638 * @param tbl テーブルID 639 */ 640 public void setTable( final String tbl ) { 641 table = nval( getRequestParameter( tbl ),table ); 642 } 643 644 /** 645 * 【TAG】処理時間を表示する TimeView を表示するかどうか[true:する/false:しない]を指定します 646 * (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。 647 * 648 * @og.tag 649 * true に設定すると、処理時間を表示するバーイメージが表示されます。 650 * これは、DB検索、APサーバー処理、画面表示の各処理時間をバーイメージで 651 * 表示させる機能です。処理時間の目安になります。 652 * (初期値:VIEW_USE_TIMEBAR[={@og.value SystemData#VIEW_USE_TIMEBAR}])。 653 * 654 * @og.rev 6.3.6.0 (2015/08/16) useTimeView の初期値を、VIEW_USE_TIMEBAR にする。 655 * 656 * @param flag 処理時間を表示 [true:する/false:しない] 657 */ 658 public void setUseTimeView( final String flag ) { 659 useTimeView = nval( getRequestParameter( flag ),useTimeView ); 660 } 661 662 /** 663 * このオブジェクトの文字列表現を返します。 664 * 基本的にデバッグ目的に使用します。 665 * 666 * @return このクラスの文字列表現 667 * @og.rtnNotNull 668 */ 669 @Override 670 public String toString() { 671 return ToString.title( this.getClass().getName() ) 672 .println( "VERSION" ,VERSION ) 673 .println( "dbid" ,dbid ) 674 // .println( "clmKeys" ,clmKeys ) 675 .println( "sql" ,sql ) 676 .println( "commitBatch" ,commitBatch ) 677 .println( "Other..." ,getAttributes().getAttribute() ) 678 .fixForm().toString() ; 679 } 680}