如何在内部更改十进制分隔符，同时从csv导入数据?

353次浏览(最近30天)

显示旧的注释

丹尼斯·B 2021年5月6日

0
链接

直接链接到这个问题

//www.tianjin-qmedu.com/matlabcentral/answers/822895-how-to-internally-change-decimal-separator-while-importing-data-from-a-csv

评论道: Stephen23 2022年10月20日

答:接受 Stephen23

你好,

我目前正在处理非常大的数据文件(csv)，大约有15000行和几百列。由于单元格中的数据是由欧洲软件派生的，因此小数分隔符是一个逗号，我使用一个小脚本将其替换为一个点。这个脚本工作得很好，但由于不能操纵原始文件，因此必须将更正的数据存储在新文件中。我想做的是从文件中导入数据，生成一个包含所有数据的工作空间变量，但是逗号被点代替。这将是非常有用的，因为要进一步处理数据，我总是必须生成一个新文件并手动加载。由于这相当耗时，我想避免这一步。

目前的流程:

                         %%小脚本，用点替换逗号，并将更正后的数据保存到名为[…]_dots的新csv文件中
                        
                         (文件名、路径)= uigetfile (‘* . csv‘);
                        
                         cd(路径);
                        
                         disp(文件名)
                        
                         oldfile =文件名(1:end-4);
                        
                         NewFileName = sprintf(“% s_Dots.csv”, oldfile);
                        
                         Data = fileread(文件名);
                        
                         数据= strrep(数据，”、“，“。”);
                        
                         %将更正后的数据保存到新文件
                        
                         FID = fopen(NewFileName;' w ');
                        
                         写入文件(支撑材、数据“字符”);
                        
                         文件关闭(FID);

当使用点作为小数分隔符时，导入非常容易，并生成一个方便的结构数组，用于数据的进一步求值，如下所示。结构数组用于进一步检查数据

                         i_start_import = 1;
                        
                         datastruct = importdata(文件名,“;”, i_start_import);

但是，当逗号用作小数分隔符时，importdata函数不会生成结构数组。

实验:

到目前为止，我尝试接收相同的结构，但以点作为分隔符是在原始数据中读取importdata，以进一步将逗号转换为点，然后分割数据字符串以接收表格存储的数据。不幸的是，这非常耗时，对于我的csv中的所有数千个单元格(特别是拆分过程)来说，这花费的时间太长。

应用importdata后的数据如下所示:

然后被分割成这样:

                         data = importdata(文件名,“;”, 100000);
                        
                         %创建结构数组
                        
                         datastruct =结构
                        
                         datastruct.data = [];
                        
                         %用点代替逗号
                        
                         为i = 1:长度(数据)
                        
                         {我}= strrep(数据,”、“，“。”);
                        
                         {我}=数据;
                        
                         结束
                        
                         %拆分数据字符串
                        
                         为i = 1:长度(数据)%索引行
                        
                         为j = 1:516%因为有516列，索引列
                        
                         {我}str = strsplit(数据,“;”);
                        
                         datastruct.textdata {i, j} = str (j);
                        
                         如果j = = 516
                        
                         打破
                        
                         其他的
                        
                         继续
                        
                         结束
                        
                         结束
                        
                         结束

理想情况下，数据应该存储在一个结构数组中，字段textdata包含第一列(TimeStamp)和第一行(变量)的值，字段data包含所有数据。

我现在正在寻找一种方法，在原始数据中读取逗号作为小数分隔符，并将逗号转换为内部点，并将其保存为一个变量(结构体)，我可以在脚本中的进一步检查中使用。

2的评论
显示隐藏 1旧评论

丹尼斯·B 2021年5月6日

你好,简,

谢谢你的提示，我会改的!你有没有其他的想法来改变内部的小数分隔符，而不必创建一个新的文件?

登录评论。

登录回答这个问题。

接受的答案

Stephen23 2021年5月6日

3.
链接

直接链接到这个答案

//www.tianjin-qmedu.com/matlabcentral/answers/822895-how-to-internally-change-decimal-separator-while-importing-data-from-a-csv#answer_693360

编辑:Stephen23 2021年5月6日

不要使用CD访问数据文件:使用绝对/相对文件名(使用FULLFILE)更有效。

要导入CSV文件(实际上您似乎有一个分号分隔的字段)，只需选择适当的READTABLE或READMATRIX选项:

                              [F,P] = uigetfile()‘* . csv‘);
                             
                              T = readtable(fullfile(P,F)，“分隔符”，“;”，“DecimalSeparator”，”、“，“VariableNamingRule”，“保存”）

根据你的档案进行调整。如果您已经上传了一个实际的数据文件(而不是屏幕截图) 回形针按钮，那么我也会测试这个。

17日评论
显示隐藏 16旧评论

Stephen23 2021年5月15日

编辑:Stephen23 2021年5月15日

Example_Data.csv

                                   STR = fileread(“Example_Data.csv”);
                                  
                                   STR = strrep(STR，”、“，“。”);
                                  
                                   [hdr,idx] = regexp(str，' ^时间戳;[^ \ n] + '，“lineanchors”，“匹配”，“结束”，“一次”);
                                  
                                   HDR = regexp(HDR，“[^;]+”，“匹配”）
                                  
                                      hdr =1×43单元阵列
                                     
                                      {“时间戳”}{70788.1。C670010_V1:1’}{70788.1。C670011_V1:1’}{70788.1。C670012_V1:1’}{70788.1。C670013_V1:1’}{70788.1。E601000_W1:6’}{70788.1。E601000_X1:6’}{70788.1。E602000_W1:6’}{70788.1。E602000_X1:6’}{70788.1。E604001_X1:10’}{70788.1。E604002_X1:10’}{70788.1。E604003_X1:10’}{70788.1。E604004_X1:10’}{70788.1。E604005_X1:10’}{70788.1。E604006_X1:10’}{70788.1。E604007_X1:10’}{70788.1。E604008_X1:10’}{70788.1。E604009_X1:10’}{70788.1。E604010_X1:10’}{70788.1。E604011_X1:10’}{70788.1。E604012_X1:10’}{70788.1。E604013_X1:10’}{70788.1。E604014_X1:10’}{70788.1。E604015_X1:10’}{70788.1。E604016_X1:10’}{70788.1。E604017_X1:10’}{70788.1。E604018_X1:10’}{70788.1。E604019_X1:10’}{70788.1。E604020_X1:10’}{70788.1。E604021_X1:10’}{70788.1。E604022_X1:10’}{70788.1。E604023_X1:10’}{70788.1。E604024_X1:10’}{70788.1。E604025_X1:10’}{70788.1。E604026_X1:10’}{70788.1。E604027_X1:10’}{70788.1。E604028_X1:10’}{70788.1。E604029_X1:10’}{70788.1。E604030_X1:10’}{70788.1。E604031_X1:10’}{70788.1。E604032_X1:10’}{70788.1。E604033_X1:10’}{“70788.1.E604034_X1:10←”}

                                   Opt = {“分隔符”，“;”，“CollectOutput”,真正的};
                                  
                                   FMT =修复' % f '1,元素个数(hdr) 1);
                                  
                                   = [' % {dd.MM。yyyy HH: mm: ss。SSSSSSSSS} D 'fmt);% 01.01.1900 16:37:21.0000000
                                  
                                   Out = textscan(str(idx:end)，fmt,opt{:})
                                  
                                      了=1×2单元阵列
                                     
                                      {33×1 datetime} {32×42 double}

                                   从{1}
                                  
                                      ans =33×1日期时间数组
                                     
                                      01.01.1900 16:37:21.000000000 01.01.1900 16:37:21.000000100 01.01.1900 16:37:21.000000200 01.01.1900 16:37:21.000000300 01.01.1900 16:37:21.000000400 01.01.1900 16:37:21.000000500 01.01.1900 16:37:21.000000600 01.01.1900 16:37:21.000000700 01.01.1900 16:37:21.000000800 01.01.1900 16:37:21.000000900 01.01.1900 16:37:21.000001000 01.01.1900 16:37:21.000001100 01.01.1900 16:37:21.000001200 01.01.1900 16:37:21.000001299 01.01.1900 16:37:21.000001400 01.01.1900 16:37:21.000001500 01.01.190016:37:21.000001600 01.01.1900 16:37:21.000001800 01.01.1900 16:37:21.000002000 01.01.1900 16:37:21.000002000 01.01.1900 16:37:21.000002100 01.01.1900 16:37:21.000002200 01.01.1900 16:37:21.000002300 01.01.1900 16:37:21.000002400 01.01.1900 16:37:21.000002599 01.01.1900 16:37:21.000002700 01.01.1900 16:37:21.000002800

                                   出{2}
                                  
                                      ans =
                                      32×42
                                     
                                       0.9545 0.1770 0.9406 0.9716 30.0000 1.9600 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0040 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.7500 0 0.0300 0.0060 0.0010 0.0130 0.0050 0.0050 0.0060 0.0040 0.0130 0.0060 0.0040 0.0160 0.0060 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.0040 0.0060 0.0050 0.00110 0.0050 0.0050 0.0100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 2.0400 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0010 0.0130 0.0060 0.00600.0060 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.0050 0.0050 0.0110 0.0050 0.0050 0.0050 0.0100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.9400 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0040 0.0040 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.0040 0.0050 0.00110 0.0050 0.0050 0.00100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.9700 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0040 0.0160 0.0060 0.0250 0.0250 0.0170 0.0040 0.0150 0.0050 0.0050 0.001000.0.0050 0.9545 0.1770 0.9716 30.0000 1.9100 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0040 0.0160 0.0060 0.0050 0.0050 0.0110 0.0050 0.0050 0.0100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.9000 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0010 0.0130 0.0050 0.0060 0.0040 0.0040 0.0160 0.0060 0.0050 0.0250 0.0140 0.0040 0.0150 0.0050 0.0040 0.0060 0.0050 0.0110 0.0050 0.0050 0.0100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.9300 0 0.0300 0.0060 0.0010 0.0130 0.00600.0160 0.0060 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.0050 0.0050 0.0110 0.0050 0.0050 0.0050 0.00100 0 0.0050 0.9545 0.1770 0.9406 0.9716 30.0000 1.9500 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0040 0.0160 0.0060 0.0050 0.00250 0.0250 0.0140 0.0040 0.0150 0.0050 0.1745 0.1770 0.9406 0.9716 30.0000 1.9300 0 0.0300 0.0060 0.0010 0.0130 0.0060 0.0060 0.0060 0.0160 0.0060 0.0250 0.0250 0.0140 0.0040 0.0150 0.0050 0.0050 0.0050 0.0050 0.0050 0.00500.0100 0 0.0050

Stephen23 2022年10月20日

@Louis-Marie :假定代码中的OPTS变量是由DETECTIMPORTOPTIONS返回的对象，在这种情况下，您可以在那里指定'DecimalSeparator'选项。指定。没有意义 “DecimalSeparator” 选项，因为DETECTIMPORTOPTIONS还需要知道小数分隔符来检测例如哪些数据是数字。

登录评论。

类别

MATLAB 数据导入与分析数据导入导出标准文件格式电子表格

了解更多有关电子表格在帮助中心和文件交换

s manbetx 845

MATLAB

释放

R2019b

社区寻宝

在MATLAB Central中寻找宝藏，并了解社区如何帮助您!

开始狩猎!

如何在内部更改十进制分隔符，同时从csv导入数据?

2的评论
显示隐藏 1旧评论

接受的答案

17日评论
显示隐藏 16旧评论

更多答案(0)

另请参阅

类别

标签

s manbetx 845

释放

社区寻宝

如何在内部更改十进制分隔符，同时从csv导入数据?

2的评论 显示隐藏 1旧评论

接受的答案

17日评论 显示隐藏 16旧评论

更多答案(0)

另请参阅

类别

标签

s manbetx 845

释放

社区寻宝

2的评论
显示隐藏 1旧评论

17日评论
显示隐藏 16旧评论