ホーム   フォーラム   FAQ
 
メインメニュー
ログイン
ユーザー名:

パスワード:


パスワード紛失

大量(2万行)エクセルデータの取り扱いについて

  • このフォーラムに新しいトピックを立てることはできません
  • このフォーラムではゲスト投稿が禁止されています
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-20 11:58 | 最終変更
hitachijoho  常連   投稿数: 53
本件、解決されましたので、ご連絡します。
ありがとうございました。
投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-19 22:25
hitachijoho  常連   投稿数: 53
>エクセルファイルに何件データがあるかという計算処理もありま>すが、これから、Logicを簡単にしてからやって見ます。
⇒今、エクセルファイルに何件データがあるかという計算処理を省略してから、やってみた所、フローが動いている間、SQLServerのテーブルにはどんどんレコードは登録されていますので、これから、エクセルファイルに何件データがあるかという計算処理を改善致します。
投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-19 21:06
hitachijoho  常連   投稿数: 53
jBOLTerさま
 ご確認、誠にありがとうございました。
>反応がないというのは、1件もDBテーブルに作成されないということですか?
⇒はい、1件もDBテーブルに作成されないんです。
>反応がないとすると、それは何か別の問題ではないでしょうか。
⇒実ですね、此方の処理流れはDBテーブルにinsertする前に、
エクセルファイルに何件データがあるかという計算処理もありますが、これから、Logicを簡単にしてからやって見ます。
ご対応、ありがとうございました。
投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-19 19:04
jBOLTer  一人前   投稿数: 82
こんにちは。

Jiro123さんのやり方で、2万1千件作ってみましたが、問題なくできました。

>この場合、JBOLTで作成した移行ツールは半時間が経っても、反応がありません。

反応がないというのは、1件もDBテーブルに作成されないということですか?フローが動いている間、SQLServerのテーブルにはどんどんレコードは登録されているはずです。反応がないとすると、それは何か別の問題ではないでしょうか。

投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-19 18:13
Jiro123  長老   投稿数: 271
すみません。

今は、ちょっとそこまでの余裕はないです。

投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿.1 | 投稿日時 2010-8-19 18:07 | 最終変更
hitachijoho  常連   投稿数: 53
Jiro123さま
ご回答、ありがとうございました。
こちらの現在の実装方法はJiro123さまが仰った実装方法と同じですが、お手数ですが、Jiro123さまの方は2万行ぐらいのデータを作成して頂いてこの現象は再現できるかどうかを一度ご確認をお願いできますでしょうか?
以上、よろしくお願いします。
投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿なし | 投稿日時 2010-8-19 11:24
Jiro123  長老   投稿数: 271
2万行のデータを扱う際のロジック(メソッド)は何をどのように使っていますか。

経験的に、Vector関係のメソッドは、大量データを扱うととても遅くて、実運用レベルでの使用は厳しいと判断しています。

私のところでは、Cellメソッドで、1行文の全セルを変数にセットしてから、行単位でInsertを行うようにしています。

CellメソッドのGetValueアクションで、行パラメータには、行を示す変数(行変数)をセットしておきます。

そして、フローのステップにて、Gotoコマンドを使って、行ループをフロー内で実装して、繰り返し処理を実現しています。

Gotoコマンドで上位のステップに戻して、そこで、行変数をインクリメントします。

2万も行があるならば、恐らくこちらの実装方法のが速いと思います。

投票数:0 平均点:0.00
前の投稿 - 次の投稿 | 親投稿 - 子投稿.1 .2 .3 .4 .5 .6 | 投稿日時 2010-8-18 19:03 | 最終変更
hitachijoho  常連   投稿数: 53
いつもお世話になっております。
今、エクセルファイルからMSSQLSERVERへのデータ移行ツールをJBOLTを使って作成しています。
 一部のエクセルファイルが2万行のデータを持ってますが、
この場合、JBOLTで作成した移行ツールは半時間が経っても、反応がありません。
 JBOLTでは大量(2万行)エクセルファイルデータの取り扱いについては、どのようにやりますでしょうか?
 ※エクセルファイルのデータを減らして300行ぐらいだったら、旨く導入されました。
 
お手数ですが、ご教示のほど、よろしくお願い致します。 

投票数:0 平均点:0.00

  条件検索へ


Copyright (C) Magic Software Japan K.K. All Rights Reserved.
個人情報保護方針 会員規約