safedataframe:为Spark数据帧提供类型安全性的实验

时间:2024-05-30 04:35:01
【文件属性】:

文件名称:safedataframe:为Spark数据帧提供类型安全性的实验

文件大小:5KB

文件格式:ZIP

更新时间:2024-05-30 04:35:01

Scala

安全数据框 为数据框提供类型安全性的实验。 如果可能,编程错误应该是编译时错误,而不是运行时。 这是我尝试做的事情的一个示例: val df = sqlContext.read.json("people.json") val sdf = SafeDataFrame(df, "name".witness :: HNil) // Check at runtime the "name" column exists sdf("name") sdf("notacolumn") // Does not compile 这不会编译,因为“ notacolumn”不存在。


【文件预览】:
safedataframe-master
----people.json(84B)
----src()
--------test()
--------main()
----build.sbt(829B)
----.gitignore(84B)
----project()
--------build.properties(133B)
----README.md(522B)

网友评论