Phoenix Ecto 插入原始数据

假设有如下数据 Records

rank  name  desc
1  apple  fruit
2  cat  animal
3  bike  vehicle

如果你想把你的集合拆分成小的分组,chunk就是你要找的函数:

iex> Enum.chunk([1, 2, 3, 4, 5, 6], 2)
[[1, 2], [3, 4], [5, 6]]

使用~w()这个魔术符可以将空格分割的字符串转换为列表:

iex> ~w(1  apple  fruit)
["1", "apple", "fruit"]

1. 数据预处理:输入所有数据到data列表变量

iex> data = ~w(1  apple  fruit
...> 2  cat  animal
...> 3  bike  vehicle)
["1", "apple", "fruit", "2", "cat", "animal", "3", "bike", "vehicle"]

2. 数据分组:使用chunk函数进行分组

iex> Enum.chunk(data, 3)
[["1", "apple", "fruit"], ["2", "cat", "animal"], ["3", "bike", "vehicle"]]

当然,也可以写成

data |> Enum.chunk(3)

结果是一样的

3. 构成结构体

可以使用Enum.zip组合两个列表

iex> Enum.zip([:rank, :name, :desc], ["1", "apple", "fruit"])
[rank: "1", name: "apple", desc: "fruit"]

如果在后面使用Enum.into就可以构造map类型啦!

iex> Enum.zip([:rank, :name, :desc], ["1", "apple", "fruit"]) |> Enum.into(%{})
%{desc: "fruit", name: "apple", rank: "1"}

4. Map VS Struct

这里我们回顾一下Elixir Map和Struct的区别,map属于基本结构,形式为%{usernmae: "szy", passwd: "elixir"},注意到这里的username拼写错误,在使用时:

iex> user.username
** (KeyError) key :username not found in: %{passwd: "elixir", usernmae: "szy"}

发现提示没有找到这个key。这说明map只在runtime进行key的验证,在插入的时候没有进行验证。如果希望在插入数据时就对key是否存在进行验证,则需要使用struct。

Struct本质上也是一个Map,只不过多了一个Key,也就是__struct__

iex> user = %User{username: "szy"}
%Elecity.User{__meta__: #Ecto.Schema.Metadata<:built>, description: nil,
 email: nil, id: nil, inserted_at: nil, password: nil, password_hash: nil,
 updated_at: nil,
 user_role_id: nil, username: "szy"}

如果插入时没有key会立即提示错误

iex> user2 = %User{usernmae: "szy"}
** (CompileError) iex:3: unknown key :usernmae for struct Elecity.User

此外,插入时没有声明的部分会自动填充默认内容。

5. 综合

现在我们就来构造结构体吧!同样使用~w()a,这里后面的a代表转换的是atom类型。

iex> key = ~w(rank  name  desc)a
[:rank, :name, :desc]
iex> data = ~w(1  apple  fruit
...> 2  cat  animal
...> 3  bike  vehicle)
["1", "apple", "fruit", "2", "cat", "animal", "3", "bike", "vehicle"]
iex> data = Enum.chunk(data, 3)
[["1", "apple", "fruit"], ["2", "cat", "animal"], ["3", "bike", "vehicle"]]
iex(19)> for record <- data do
...(19)>   Enum.zip(key, record)
...(19)>   |> Enum.into(%Record{})
...(19)>   |> Repo.insert!()
...(19)> end

当然,使用insert_all可以大大简化

MyApp.Repo.insert_all(Post, [[title: "hello", body: "world"], [title: "another", body: "post"]])

第一个data

iex(21)> for rec <- data do
...(21)> Enum.zip(key, rec)
...(21)> end
[[rank: "1", name: "apple", desc: "fruit"],
 [rank: "2", name: "cat", desc: "animal"],
 [rank: "3", name: "bike", desc: "vehicle"]]

总结一下,就是:

  1. ~w()a转换key
  2. ~w()转换数据
  3. Enum.chunk分组数据
  4. Enum.zip添加key
  5. Enum.into转换Struct后逐个插入Ecto 1.x
  6. 批量 insert_all (Step4) Ecto 2.x

http://blog.plataformatec.com.br/2016/05/ectos-insert_all-and-schemaless-queries/
http://www.elixir-cn.com/posts/136

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,084评论 6 503
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,623评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,450评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,322评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,370评论 6 390
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,274评论 1 300
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,126评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,980评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,414评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,599评论 3 334
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,773评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,470评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,080评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,713评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,852评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,865评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,689评论 2 354

推荐阅读更多精彩内容