回答:
Apache Commons IOを使用して、これと同様のタスクを処理できます。
このIOUtils
型には、を読み込んInputStream
で返す静的メソッドがありますbyte[]
。
InputStream is;
byte[] bytes = IOUtils.toByteArray(is);
内部的にこれはa ByteArrayOutputStream
を作成し、バイトを出力にコピーしてから、を呼び出しますtoByteArray()
。4KiBのブロック単位でバイトをコピーすることにより、大きなファイルを処理します。
FastArrayList
や、それらのソフトで弱いリファレンスマップを見て、このライブラリの「十分にテストされた」方法を教えてください。ゴミの山です
InputStream is;
byte[] filedata=ByteStreams.toByteArray(is);
から各バイトを読み取り、InputStream
それをに書き込む必要がありますByteArrayOutputStream
。
次に、以下を呼び出して、基礎となるバイト配列を取得できますtoByteArray()
。
InputStream is = ...
ByteArrayOutputStream buffer = new ByteArrayOutputStream();
int nRead;
byte[] data = new byte[16384];
while ((nRead = is.read(data, 0, data.length)) != -1) {
buffer.write(data, 0, nRead);
}
return buffer.toByteArray();
最後に、20年後、Java 9のおかげで、サードパーティのライブラリを必要としないシンプルなソリューションがあります。
InputStream is;
…
byte[] array = is.readAllBytes();
また、便利なメソッドreadNBytes(byte[] b, int off, int len)
とtransferTo(OutputStream)
繰り返し発生するニーズへの対応にも注意してください。
バニラJava DataInputStream
とそのreadFully
メソッドを使用(少なくともJava 1.4以降に存在):
...
byte[] bytes = new byte[(int) file.length()];
DataInputStream dis = new DataInputStream(new FileInputStream(file));
dis.readFully(bytes);
...
この方法には他にもいくつかの種類がありますが、この使用例ではこれを常に使用しています。
DataInputStream
はストリームからプライマリタイプ(Longs、Shorts、Chars ...)を読み取るために主に使用されるため、この使用法をクラスの誤用と見なすことができます。
InputStream.read
。
あなたがグーグルグアバをたまたま使用するなら、それは次のように簡単です:
byte[] bytes = ByteStreams.toByteArray(inputStream);
ByteStreams
注釈付き@Beta
いつものように、Springフレームワーク(3.2.2以降のspring-core)にもいくつかの機能があります。StreamUtils.copyToByteArray()
public static byte[] getBytesFromInputStream(InputStream is) throws IOException {
ByteArrayOutputStream os = new ByteArrayOutputStream();
byte[] buffer = new byte[0xFFFF];
for (int len = is.read(buffer); len != -1; len = is.read(buffer)) {
os.write(buffer, 0, len);
}
return os.toByteArray();
}
安全なソリューション(close
ストリームの機能を正しく使用):
Java 9+バージョン:
final byte[] bytes;
try (inputStream) {
bytes = inputStream.readAllBytes();
}
Java 8バージョン:
public static byte[] readAllBytes(InputStream inputStream) throws IOException {
final int bufLen = 4 * 0x400; // 4KB
byte[] buf = new byte[bufLen];
int readLen;
IOException exception = null;
try {
try (ByteArrayOutputStream outputStream = new ByteArrayOutputStream()) {
while ((readLen = inputStream.read(buf, 0, bufLen)) != -1)
outputStream.write(buf, 0, readLen);
return outputStream.toByteArray();
}
} catch (IOException e) {
exception = e;
throw e;
} finally {
if (exception == null) inputStream.close();
else try {
inputStream.close();
} catch (IOException e) {
exception.addSuppressed(e);
}
}
}
Kotlinバージョン(Java 9+にアクセスできない場合):
@Throws(IOException::class)
fun InputStream.readAllBytes(): ByteArray {
val bufLen = 4 * 0x400 // 4KB
val buf = ByteArray(bufLen)
var readLen: Int = 0
ByteArrayOutputStream().use { o ->
this.use { i ->
while (i.read(buf, 0, bufLen).also { readLen = it } != -1)
o.write(buf, 0, readLen)
}
return o.toByteArray()
}
}
本当に画像が必要byte[]
ですか?正確には何を期待していますかbyte[]
-画像ファイルの完全なコンテンツ、画像ファイルの形式でエンコードされたもの、またはRGBピクセル値?
ここでの他の回答は、ファイルをに読み込む方法を示していますbyte[]
。あなたbyte[]
はファイルの正確な内容を含みます、そしてあなたは画像データで何かをするためにそれをデコードする必要があるでしょう。
画像の読み取り(および書き込み)のためのJavaの標準APIは、パッケージにあるImageIO APIですjavax.imageio
。1行のコードでファイルから画像を読み取ることができます。
BufferedImage image = ImageIO.read(new File("image.jpg"));
これにより、BufferedImage
ではなくが提供されますbyte[]
。画像データを取得するには、呼び出すことができますgetRaster()
にBufferedImage
。これによりRaster
、ピクセルデータにアクセスするためのメソッドを持つオブジェクトが提供されます(いくつかのgetPixel()
/ getPixels()
メソッドがあります)。
APIドキュメントを検索用javax.imageio.ImageIO
、java.awt.image.BufferedImage
、java.awt.image.Raster
など
ImageIOは、デフォルトで、JPEG、PNG、BMP、WBMP、GIFの多くの画像形式をサポートしています。さらに多くの形式のサポートを追加することが可能です(ImageIOサービスプロバイダーインターフェイスを実装するプラグインが必要です)。
次のチュートリアルも参照してください:画像の操作
誰かがまだ依存関係のない解決策を探している場合や、ファイルがある場合。
1)DataInputStream
byte[] data = new byte[(int) file.length()];
DataInputStream dis = new DataInputStream(new FileInputStream(file));
dis.readFully(data);
dis.close();
2)ByteArrayOutputStream
InputStream is = new FileInputStream(file);
ByteArrayOutputStream buffer = new ByteArrayOutputStream();
int nRead;
byte[] data = new byte[(int) file.length()];
while ((nRead = is.read(data, 0, data.length)) != -1) {
buffer.write(data, 0, nRead);
}
3)RandomAccessFile
RandomAccessFile raf = new RandomAccessFile(file, "r");
byte[] data = new byte[(int) raf.length()];
raf.readFully(data);
Apache commons-ioライブラリを使用したくない場合、このスニペットはsun.misc.IOUtilsクラスから取得されます。ByteBuffersを使用した一般的な実装のほぼ2倍の速さです。
public static byte[] readFully(InputStream is, int length, boolean readAll)
throws IOException {
byte[] output = {};
if (length == -1) length = Integer.MAX_VALUE;
int pos = 0;
while (pos < length) {
int bytesToRead;
if (pos >= output.length) { // Only expand when there's no room
bytesToRead = Math.min(length - pos, output.length + 1024);
if (output.length < pos + bytesToRead) {
output = Arrays.copyOf(output, pos + bytesToRead);
}
} else {
bytesToRead = output.length - pos;
}
int cc = is.read(output, pos, bytesToRead);
if (cc < 0) {
if (readAll && length != Integer.MAX_VALUE) {
throw new EOFException("Detect premature EOF");
} else {
if (output.length != pos) {
output = Arrays.copyOf(output, pos);
}
break;
}
}
pos += cc;
}
return output;
}
@Adamski:バッファを完全に回避できます。
http://www.exampledepot.com/egs/java.io/File2ByteArray.htmlからコピーされたコード(はい、非常に冗長ですが、他のソリューションの半分のサイズのメモリが必要です)
// Returns the contents of the file in a byte array.
public static byte[] getBytesFromFile(File file) throws IOException {
InputStream is = new FileInputStream(file);
// Get the size of the file
long length = file.length();
// You cannot create an array using a long type.
// It needs to be an int type.
// Before converting to an int type, check
// to ensure that file is not larger than Integer.MAX_VALUE.
if (length > Integer.MAX_VALUE) {
// File is too large
}
// Create the byte array to hold the data
byte[] bytes = new byte[(int)length];
// Read in the bytes
int offset = 0;
int numRead = 0;
while (offset < bytes.length
&& (numRead=is.read(bytes, offset, bytes.length-offset)) >= 0) {
offset += numRead;
}
// Ensure all the bytes have been read in
if (offset < bytes.length) {
throw new IOException("Could not completely read file "+file.getName());
}
// Close the input stream and return bytes
is.close();
return bytes;
}
is.close()
かどうoffset < bytes.length
かを追加する必要InputStream
があります。
Input Stream is ...
ByteArrayOutputStream bos = new ByteArrayOutputStream();
int next = in.read();
while (next > -1) {
bos.write(next);
next = in.read();
}
bos.flush();
byte[] result = bos.toByteArray();
bos.close();
InputStream
中にBufferedInputStream
OS-呼び出しを削減し、大幅にパフォーマンスの欠点を緩和するだろうとコードの前に、そのコードはまだ別のバッファから不要な手動コピー作業を行います。
Java 9はついに素晴らしい方法を提供します:
InputStream in = ...;
ByteArrayOutputStream bos = new ByteArrayOutputStream();
in.transferTo( bos );
byte[] bytes = bos.toByteArray();
InputStram.readAllBytes()
ワンライナーの違いは何ですか?
手遅れだと知っていますが、ここではより読みやすい、よりクリーンな解決策だと思います...
/**
* method converts {@link InputStream} Object into byte[] array.
*
* @param stream the {@link InputStream} Object.
* @return the byte[] array representation of received {@link InputStream} Object.
* @throws IOException if an error occurs.
*/
public static byte[] streamToByteArray(InputStream stream) throws IOException {
byte[] buffer = new byte[1024];
ByteArrayOutputStream os = new ByteArrayOutputStream();
int line = 0;
// read bytes from stream, and store them in buffer
while ((line = stream.read(buffer)) != -1) {
// Writes bytes from byte array (buffer) into output stream.
os.write(buffer, 0, line);
}
stream.close();
os.flush();
os.close();
return os.toByteArray();
}
Java 8 way(BufferedReaderとAdam Bienに感謝)
private static byte[] readFully(InputStream input) throws IOException {
try (BufferedReader buffer = new BufferedReader(new InputStreamReader(input))) {
return buffer.lines().collect(Collectors.joining("\n")).getBytes(<charset_can_be_specified>);
}
}
このソリューションはキャリッジリターン( '\ r')を消去するため、不適切な場合があることに注意してください。
String
。OPが求めていbyte[]
ます。
\r
が問題になるだけではありません。このメソッドは、バイトを文字に変換し、再び戻します(InputStreamReaderのデフォルトの文字セットを使用)。デフォルトの文字エンコーディング(たとえば、LinuxのUTF-8の場合は-1)で無効なバイトは破損し、バイト数が変更される可能性もあります。
@numanの回答をガベージデータの書き込みを修正して編集しようとしましたが、編集が拒否されました。この短いコードは素晴らしいものではありませんが、他にもっと良い答えはありません。これが私にとって最も意味のあることです:
ByteArrayOutputStream out = new ByteArrayOutputStream();
byte[] buffer = new byte[1024]; // you can configure the buffer size
int length;
while ((length = in.read(buffer)) != -1) out.write(buffer, 0, length); //copy streams
in.close(); // call this in a finally block
byte[] result = out.toByteArray();
ところで、ByteArrayOutputStreamを閉じる必要はありません。読みやすくするために、try / finally構文は省略
InputStream.available()
ドキュメントを参照してください:
このメソッドを使用してコンテナのサイズを変更することはできず、コンテナのサイズを変更することなくストリーム全体を読み取ることができると想定することが重要です。そのような呼び出し元は、おそらくすべてをByteArrayOutputStreamに書き込み、それをバイト配列に変換する必要があります。または、ファイルから読み取る場合、File.lengthはファイルの現在の長さを返します(ただし、ファイルの長さが変更できないと仮定すると正しくない場合がありますが、ファイルの読み取りは本質的に際どいものです)。
何らかの理由でテーブルから外れている場合は、DataInputStreamでラップします。-1または要求されたブロック全体が得られるまで、readを使用してハンマーします。
public int readFully(InputStream in, byte[] data) throws IOException {
int offset = 0;
int bytesRead;
boolean read = false;
while ((bytesRead = in.read(data, offset, data.length - offset)) != -1) {
read = true;
offset += bytesRead;
if (offset >= data.length) {
break;
}
}
return (read) ? offset : -1;
}
S3オブジェクトをByteArrayに変換している間、いくつかのAWSトランザクションで遅延が発生しています。
注:S3オブジェクトはPDFドキュメントです(最大サイズは3 MB)。
オプション#1(org.apache.commons.io.IOUtils)を使用して、S3オブジェクトをByteArrayに変換しています。S3がS3オブジェクトをByteArrayに変換するためのinbuild IOUtilsメソッドを提供していることを確認しました。遅延を回避するためにS3オブジェクトをByteArrayに変換する最良の方法を確認するように要求されます。
オプション1:
import org.apache.commons.io.IOUtils;
is = s3object.getObjectContent();
content =IOUtils.toByteArray(is);
オプション#2:
import com.amazonaws.util.IOUtils;
is = s3object.getObjectContent();
content =IOUtils.toByteArray(is);
また、s3オブジェクトをバイト配列に変換する他のより良い方法があるかどうかも教えてください
サーバーにリクエストを送信し、レスポンスを待った後、ストリームを介して正しいバイト配列を取得するもう1つのケース。
/**
* Begin setup TCP connection to PC app
* to open integrate connection between mobile app and pc app (or mobile app)
*/
mSocket = new Socket(IP, port);
// mSocket.setSoTimeout(30000);
DataOutputStream mDos = new DataOutputStream(mSocket.getOutputStream());
String str = "MobileRequest#" + params[0] + "#<EOF>";
mDos.write(str.getBytes());
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
e.printStackTrace();
}
/* Since data are accepted as byte, all of them will be collected in the
following byte array which initialised with accepted data length. */
DataInputStream mDis = new DataInputStream(mSocket.getInputStream());
byte[] data = new byte[mDis.available()];
// Collecting data into byte array
for (int i = 0; i < data.length; i++)
data[i] = mDis.readByte();
// Converting collected data in byte array into String.
String RESPONSE = new String(data);
ByteArrayOutputStreamを使用する場合は、追加のコピーを実行しています。読み取りを開始する前にストリームの長さがわかっている場合(たとえば、InputStreamは実際にはFileInputStreamであり、ファイルに対してfile.length()を呼び出すことができます。または、InputStreamがzipfileエントリのInputStreamであり、zipEntryを呼び出すことができます。 length())の場合、byte []配列に直接書き込む方がはるかに優れています。メモリの半分を使用し、時間を節約できます。
// Read the file contents into a byte[] array
byte[] buf = new byte[inputStreamLength];
int bytesRead = Math.max(0, inputStream.read(buf));
// If needed: for safety, truncate the array if the file may somehow get
// truncated during the read operation
byte[] contents = bytesRead == inputStreamLength ? buf
: Arrays.copyOf(buf, bytesRead);
上記の最後の行は、ストリームの読み取り中にファイルが切り捨てられることを扱っています。その可能性を処理する必要がある場合は、ストリームの読み取り中にファイルが長くなると、byte []配列の内容は長くなりません。新しいファイルの内容を含めるために、配列は単に古い長さのinputStreamLengthに切り捨てられます。
私はこれを使います。
public static byte[] toByteArray(InputStream is) throws IOException {
ByteArrayOutputStream output = new ByteArrayOutputStream();
try {
byte[] b = new byte[4096];
int n = 0;
while ((n = is.read(b)) != -1) {
output.write(b, 0, n);
}
return output.toByteArray();
} finally {
output.close();
}
}
これは私のコピー貼り付けバージョンです:
@SuppressWarnings("empty-statement")
public static byte[] inputStreamToByte(InputStream is) throws IOException {
if (is == null) {
return null;
}
// Define a size if you have an idea of it.
ByteArrayOutputStream r = new ByteArrayOutputStream(2048);
byte[] read = new byte[512]; // Your buffer size.
for (int i; -1 != (i = is.read(read)); r.write(read, 0, i));
is.close();
return r.toByteArray();
}
これは最適化されたバージョンで、データバイトをできるだけコピーしないようにしています。
private static byte[] loadStream (InputStream stream) throws IOException {
int available = stream.available();
int expectedSize = available > 0 ? available : -1;
return loadStream(stream, expectedSize);
}
private static byte[] loadStream (InputStream stream, int expectedSize) throws IOException {
int basicBufferSize = 0x4000;
int initialBufferSize = (expectedSize >= 0) ? expectedSize : basicBufferSize;
byte[] buf = new byte[initialBufferSize];
int pos = 0;
while (true) {
if (pos == buf.length) {
int readAhead = -1;
if (pos == expectedSize) {
readAhead = stream.read(); // test whether EOF is at expectedSize
if (readAhead == -1) {
return buf;
}
}
int newBufferSize = Math.max(2 * buf.length, basicBufferSize);
buf = Arrays.copyOf(buf, newBufferSize);
if (readAhead != -1) {
buf[pos++] = (byte)readAhead;
}
}
int len = stream.read(buf, pos, buf.length - pos);
if (len < 0) {
return Arrays.copyOf(buf, pos);
}
pos += len;
}
}
Kotlinのソリューション(もちろんJavaでも機能します)。これには、サイズがわかっているかどうかの両方のケースが含まれます。
fun InputStream.readBytesWithSize(size: Long): ByteArray? {
return when {
size < 0L -> this.readBytes()
size == 0L -> ByteArray(0)
size > Int.MAX_VALUE -> null
else -> {
val sizeInt = size.toInt()
val result = ByteArray(sizeInt)
readBytesIntoByteArray(result, sizeInt)
result
}
}
}
fun InputStream.readBytesIntoByteArray(byteArray: ByteArray,bytesToRead:Int=byteArray.size) {
var offset = 0
while (true) {
val read = this.read(byteArray, offset, bytesToRead - offset)
if (read == -1)
break
offset += read
if (offset >= bytesToRead)
break
}
}
サイズがわかっている場合は、他のソリューションと比較して2倍のメモリを使用する手間が省けます(一瞬ですが、それでも役立つ場合があります)。これは、ストリーム全体を最後まで読み取り、それをバイト配列に変換する必要があるためです(配列に変換するArrayListと同様)。
たとえば、Androidを使用していて、処理するUriがいくつかある場合は、これを使用してサイズを取得できます。
fun getStreamLengthFromUri(context: Context, uri: Uri): Long {
context.contentResolver.query(uri, arrayOf(MediaStore.MediaColumns.SIZE), null, null, null)?.use {
if (!it.moveToNext())
return@use
val fileSize = it.getLong(it.getColumnIndex(MediaStore.MediaColumns.SIZE))
if (fileSize > 0)
return fileSize
}
//if you wish, you can also get the file-path from the uri here, and then try to get its size, using this: https://stackoverflow.com/a/61835665/878126
FileUtilEx.getFilePathFromUri(context, uri, false)?.use {
val file = it.file
val fileSize = file.length()
if (fileSize > 0)
return fileSize
}
context.contentResolver.openInputStream(uri)?.use { inputStream ->
if (inputStream is FileInputStream)
return inputStream.channel.size()
else {
var bytesCount = 0L
while (true) {
val available = inputStream.available()
if (available == 0)
break
val skip = inputStream.skip(available.toLong())
if (skip < 0)
break
bytesCount += skip
}
if (bytesCount > 0L)
return bytesCount
}
}
return -1L
}
/*InputStream class_InputStream = null;
I am reading class from DB
class_InputStream = rs.getBinaryStream(1);
Your Input stream could be from any source
*/
int thisLine;
ByteArrayOutputStream bos = new ByteArrayOutputStream();
while ((thisLine = class_InputStream.read()) != -1) {
bos.write(thisLine);
}
bos.flush();
byte [] yourBytes = bos.toByteArray();
/*Don't forget in the finally block to close ByteArrayOutputStream & InputStream
In my case the IS is from resultset so just closing the rs will do it*/
if (bos != null){
bos.close();
}