web-dev-qa-db-ja.com

curl .gzファイルを解凍して解凍する

特定のURLからいくつかの.gzファイル（.tar.gzファイルではなくN.B）をダウンロードし、それらを解凍して既存のファイルがある場合は上書きしようとしています。

個々のダウンロードごとに、次のことを試しました。

curl -O $URL | gunzip -f

ただし、gzip: stdin: unexpected end of fileで失敗したため、これは機能しませんでした。 bashシェルスクリプト内で一連のこのコマンドを実行しました。

コマンドを明示的な2つの手順に分けました。つまり、最初にファイルをダウンロードし、次に.gzファイルを解凍すると、機能します。

パイプバージョンが機能しないのはなぜですか？

bashscriptscurlpipegzip
13
skyork

パイプ（|シンボルで表される）は、あるプロセスの標準出力を別のプロセスの標準入力に送信します。あなたの場合、名前付きファイルを使用したいので、パイプは適切ではありません。具体的には、リモートコンテンツがローカルファイルに送信されるため、パイプするものはありません（したがってgunzipエラーが発生します）。代わりに、たとえばURLから-ファイル名を抽出する必要があります（bashの組み込みの文字列操作機能を使用）

curl -O "$URL" && gunzip -f "${URL##*/}"

パイプを使用する場合、その方法は次のようになります

curl "$URL" | gunzip -c

（-Oオプションなし）、curlは、リモートコンテンツをstdoutにストリーミングし、そこからgunzipにパイプすることができますが、ターゲットの非圧縮ファイルを適切に上書きするには、gunzip出力をリダイレクトする必要があります。

18
steeldriver

ダウンロード時にリダイレクトに従ってください。セキュリティやランダムな理由で、Webサーバーにリダイレクトが隠されている場合があります。リダイレクトに従わない場合、間違ったデータがダウンロードされ、パイプされたデータを読み取るアプリケーションが混乱します。 -Lフラグを使用してcurlでリダイレクトを追跡できます。

curl -L https://example.com/mygzip.tar.gz | tar zxv
5
Jam Risser