datastore 関数で日本語文字読み込むことは可能ですか？

現在、添付のような csv 形式のファイルを datastore 関数を使用して読み込んだところ、文字化けが発生しました。対策はありますか。

 

ds=datastore('ja_sjis.csv') 
ds.read

Answer 1

[MathWorks Support Team]

関数 datastore は Shift_JIS 文字コードでエンコードされたファイルは正しく解読できません。

datastore 関数(特に TabularTextDatastore)では、原則 ASCII もしくは UTF-8 のエンコードをサポートしており、メモリに十分余裕がある場合のみ Shift_JIS エンコードをサポートしています。

https://jp.mathworks.com/help/matlab/ref/datastore.html?s_tid=doc_ta#input_argument_namevalue_d119e168604

対策として、ASCII または UTF-8 の csv ファイルをご利用ください。

日本語文字が含まれている場合、下記関数 (convertEncoding.m) を用いて文字コード UTF-8 に変換が可能です。

 

convertEncoding('ja_sjis.csv', 'Shift_JIS', 'UTF-8');
ds = datastore('ja_sjis.csv') 
ds.read

 

% convertEncoding.m
%----------------------------------------------------------------------
%CONVERTENCODING Change the character encoding of a file
% CONVERTENCODING(FILENAME, CURRENTENCODING, NEWENCODING) converts the
% file FILENAME from character encoding CURRENTENCODING to a new
% encoding specified by NEWENCODING. A copy of the original version of
% FILENAME is placed at FILENAME.old.
%
% INPUT PARAMETERS:
% FILENAME: The name of the file to be converted.
% CURRENTENCODING: The encoding currently be used by FILENAME.
% NEWENCODING: The encoding to rewrite FILENAME in.
function convertEncoding(filename, currentEncoding, newEncoding)

bakFile = [filename, '.old'];
movefile(filename, bakFile);

fpIn = fopen(bakFile, 'r', 'n', currentEncoding);
fpOut = fopen(filename, 'w', 'n', newEncoding);

while feof(fpIn) == 0
    lineIn = fgets(fpIn);
    fwrite(fpOut, lineIn, 'char');
end

fclose(fpIn);
fclose(fpOut);

end
%----------------------------------------------------------------------