問題タブ [batch-processing]

どういうわけか.batファイルを使用してSQLServerデータベースのスキーマやコンテンツをスクリプト化することは可能ですか？

ウィザードを介してこれを行うことができますが、ソース管理の目的でこのファイルの作成を合理化したいと思います。

サードパーティのツールの使用を避け、SQLServerに付属しているツールに限定したいと思います。

私は、おそらく最も自然にデータベース テーブルの計算のバッチとして記述され、月に 1 回実行されるプログラムの作業を開始しています。すべての入力は Oracle データベース テーブルにあり、すべての出力は Oracle データベース テーブルになります。このプログラムは、今後何年にもわたって保守可能である必要があります。

これを一連のストアド プロシージャとして実装し、それぞれが賢明な変換を実行することは簡単に思えます。たとえば、いくつかのビジネス ルールに従って部門間でコストを分配します。その後、単体テストを作成して、各変換の出力が期待どおりかどうかを確認できます。

これをすべてPL/SQLで行うのは悪い考えですか? C# などの典型的なオブジェクト指向プログラミング言語で大量のバッチ計算を実行しますか? PL/SQL などのデータベース中心のプログラミング言語を使用する方が表現力が豊かではないでしょうか?

1日のさまざまな時間に実行される50以上のJavaバッチプロセスがあります。これらはSolarisボックスで実行され、cronを介して起動されます。現在、それらが成功したか失敗したかを知る唯一の方法は、各バッチプロセスの最後に生成された電子メールによるものです。これらのメールを監視するサポートチームがあります。最近、バッチが実行されているにもかかわらず、電子メールが受信されないという問題が発生しました。より良い方法があるに違いありません。

車輪の再発明をしなくても、オープンソースのバッチ監視アプリケーションはありますか？

そして、より一般的な質問ですが、バッチプロセスを監視するための最良の方法は何ですか？

毎日数百枚の画像を特定の方法で変換する必要があります。

バッチ透かし、画像のサイズ変更をサポートし、自動化できる（古い構成を再利用できる）最高のフリーウェアツールまたはC＃コードが必要です。

どのツールを提案しますか？

これは非常に一般的なシナリオです。一部のプロセスが 30 分ごとにサーバーにファイルをドロップしたいとします。シンプルですね。まあ、これがうまくいかない方法はたくさん考えられます。

たとえば、ファイルの処理には 30 分前後かかる場合があるため、前のファイルの処理が完了する前に新しいファイルが到着する可能性があります。まだ処理中のファイルをソース システムで上書きしたくありません。

一方で、ファイルが大きいため、アップロードが完了するまでに数分かかります。部分ファイルの処理を開始したくありません。ファイルは FTP または sftp (私の好み) で転送されるだけなので、OS レベルのロックはオプションではありません。

最後に、ファイルの 1 つを (デバッグのために) 手動で検査したり、再処理したりする必要がある場合に備えて、ファイルをしばらく保持する必要があります。

私は、アップロード ファイルをシャッフルしたり、ファイル名を交換したり、日付スタンプを使用したり、「インジケーター」ファイルに触れて同期を支援したりするためのアドホックなアプローチを数多く見てきました。私がまだ見ていないのは、並行性、一貫性、および完全性に対処する、ファイルを処理するための包括的な「アルゴリズム」です。

そこで、ここで群衆の知恵を活用したいと思います。バッチ データ ファイルをジャグリングする本当に防弾の方法を見た人はいますか?

4000万行のテーブルがあります。
一度に200万枚くらい拾って「加工」したい。
なんで？
1000 万以上の行を処理する Cos 処理は、パフォーマンスを低下させ、しばしばタイムアウトします。(これはデータ サイズに関係なく機能する必要があるため、タイムアウト制限を増やし続けることはできません。)
また、SQL Server を使用しています。

Webから別のフォルダに画像をダウンロードするための小さなプログラムを作成しました。すばやく汚いバッチファイル構文を作成したいのですが、さまざまな変数に最適な区切り文字は何でしょうか。

変数には、URL、フォルダーパス、ファイル名、およびいくつかのカスタムメッセージが含まれる場合があります。

では、最初の3つに使用できない文字はありますか？これは、区切り文字として使用するための明白な選択です。古き良きコンマはどうですか？

ありがとう！

SSIS ジョブを実行するバッチ ファイルがあります。私は SSIS ジョブがどのように実行されるかを知りません。それを含むプロジェクトを引き継ぎました。

バッチ ファイルは %ERRORLEVEL% を使用して、SSIS ジョブ内で発生するエラーを検出します。他のエラーも報告するように展開する必要があります。

SSIS で ERRORLEVEL を設定するにはどうすればよいですか?

autohotkeyスクリプト、つまり1つのtest.ahkを使用して、cmd.exe IDEの内容をテキストファイルに抽出しようとしています。

内容を抽出できません。誰かが抽出を行う正しい方法を提案できますか?

以下に示す .bat ファイルを使用して、IDE に存在するコンテンツ全体をテキスト ファイルにリダイレクトします。

部分的な出力しか取得できません。つまり、コンパイルまたはビルド プロセス中にスローされるエラーを取得できません。これは正しいですか、それとも他の方法を提案できますか??

どうもありがとうマディ