Fügen Sie CSV-Dateien mit "'" und "" "in Ruby 2.3 in MySQL ein

Überblick

• Wenn Sie eine CSV-Datei mit " '" oder " " in MySQL mithilfe eines CSV-Moduls in Ruby 2.3 einfügen, sollten die folgenden zwei Punkte beachtet werden.
• Wenn die CSV-Datei "" "enthält, tritt ein" Illegal Quoting "-Fehler auf, wenn" "" beim Lesen der Datei enthalten ist. Geben Sie daher "quote_char:" \ x00 "" an.
• Seit Ruby 2.4 können Sie die Option liberal_parsing für CSV-Module verwenden, jedoch nicht vor 2.3.
• Es ist ein Fehler, "\ x00" anzugeben, der normalerweise nicht in der Datei vorhanden sein sollte.
• " '" muss nach "\\'" maskiert werden, wenn es in MySQL eingefügt wird. Ersetzen Sie es daher durch gsub.

Umgebung

• ruby 2.3.8p459 (2018-10-18 revision 65136) [x86_64-linux]

Beispielcode (für TSV-Dateien)

require "csv"

summary = {}
CSV.foreach("myfile.tsv", col_sep: "\t", quote_char: "\x00", encoding: "UTF-8", headers: :first_row) do |row|
    summary = {
        :col1 => row[0].to_s,
        :col2 => row[1].to_s.gsub("'", "\\\\'"),
        :col3 => row[2].to_f,
    }
    puts summary
    # MyModel.replace(summary)
end

Testdaten (TSV-Format)

col1	col2	col3
homemade cookies	Aunt Stella's cookies	123
nickname	Louis "Satchmo" Armstrong	456
yard-pound system	4' 10"	147.32
yard-pound system 2	4′ 10″	147.32

Führen Sie die Anzeige aus und überprüfen Sie sie

{:col1=>"homemade cookies", :col2=>"Aunt Stella\\'s cookies", :col3=>123.0}
{:col1=>"nickname", :col2=>"Louis \"Satchmo\" Armstrong", :col3=>456.0}
{:col1=>"yard-pound system", :col2=>"4\\' 10\"", :col3=>147.32}
{:col1=>"yard-pound system 2", :col2=>"4′ 10″", :col3=>147.32}

Ergänzung

• Es ist verwirrend, dass "\\" durch "\" und durch "" ersetzt wird.