數(shù)據庫導出csv文件的讀取

 因為工作中會接觸到許多不同的數(shù)據庫，像 oracle,access,mssql,mysql,db2 等，比較雜。

所以一直想做一個通用的數(shù)據查詢工具，支持所有的數(shù)據庫，操作界面統(tǒng)一為 mssql 2005 的界面，這樣可以少安裝很多客戶端工具，也不需要在不同的數(shù)據庫客戶端工具之間切換來切換去了。

先放一個初始的截圖，和mssql的操作界面一樣，左邊是表、列信息顯示區(qū)，右上是 sql 語句錄入區(qū)，右下是結果顯示區(qū)
支持表和字段的自動提示，支持 csv,excel 的導入導出
ps：圖中連接的數(shù)據庫為 IBM DB2 9.5



在做數(shù)據導入導出功能時，最基本的 csv 文件格式一定要支持吧，當時就想 csv還不簡單，無非就是逗號分隔，回車換行的文本文件嗎，很快就寫出來了

最初的 csv 讀取
public static string[][] read_csv(string text)
{
var text_array = new List<string[]>();
string[] lines = text.Split('\r', '\n');
foreach (var line in lines)
{
if (!string.IsNullOrEmpty(line))
{
string[] fields = line.Split(',');
text_array.Add(fields);
}
}
return text_array.ToArray();
}

public text)
{
lines)
.IsNullOrEmpty(line))
);
text_array.Add(words);
}
text_array.ToArray();

開始一切都好，沒遇到什么問題，后來用的多了，問題開始出現(xiàn)了，發(fā)現(xiàn)有些 csv的字段中含有逗號，這下完了，遇到逗號就當成另外一個字段了，當然會報錯，原來當初太輕視 csv 文件了，呵呵，實際上csv 也是有一些需要注意的規(guī)范的。

1.如果csv文件字段中有特殊字符，整個字段應該用雙引號包起來

特殊字符有三種， 逗號[,] 回車換行[\r\n] 和處于字段開頭的雙引號["]


例如：字段 a, b,c（b,c 文本中包含逗號） ,d

就應該變成 a,"b,c",d


有回車換行的也是一樣

2.如果 csv字段中有特殊字符，并且字段中含有雙引號，則字段中的雙引號應該寫兩次


例如：字段 a, b,c"aa ,d


就應該變成 a,"b,c""aa",d


有了這兩個規(guī)范，把讀取方法重新修改一下就完了，也不復雜

修改后的 csv 讀取

public static string[][] read_csv(string text)
{
if (text == null)
return null;
var text_array = new List<string[]>();
var line = new List<string>();
var field = new StringBuilder();
//是否在雙引號內
bool in_quata = false;
//字段是否開始
bool field_start = true;
for (int i = 0; i < text.Length; i++)
{
char ch = text[i];
if (in_quata)
{
//如果已經處于雙引號范圍內
if (ch == '\"')
{
//如果是兩個引號，則當成一個普通的引號處理
if (i < text.Length - 1 && text[i + 1] == '\"')
{
field.Append('\"');
i++;
}
else
//否則退出引號范圍
in_quata = false;
}
else //雙引號范圍內的任何字符（除了雙引號）都當成普通字符
{
field.Append(ch);
}
}
else
{
switch (ch)
{
case ',': //新的字段開始
line.Add(field.ToString());
field.Remove(0, field.Length);
field_start = true;
break;
case '\"'://引號的處理
if (field_start)
in_quata = true;
else
field.Append(ch);
break;
case '\r': //新的記錄行開始
if (field.Length > 0 || field_start)
{
line.Add(field.ToString());
field.Remove(0, field.Length);
}
text_array.Add(line.ToArray());
line.Clear();
field_start = true;
//在 window 環(huán)境下，\r\n通常是成對出現(xiàn)，所以要跳過
if (i < text.Length - 1 && text[i + 1] == '\n')
i++;
break;
default:
field_start = false;
field.Append(ch);
break;
}
}
}
//文件結束
if (field.Length > 0 || field_start)
line.Add(field.ToString());
if (line.Count > 0)
text_array.Add(line.ToArray());
return text_array.ToArray();
}
經過修改后，基本上就沒遇到什么問題了。