我目前正在努力寻找 metadata spark中structfield对象的属性。
我查了官方文件https://spark.apache.org/docs/latest/api/python/pyspark.sql.html?highlight=structfield#pyspark.sql.types.structfield
但我还是不明白这个变量的用途。我的意思是，我可以，例如，设置一个选项的主键感谢 metadata ? 如果是，这个单词应该是什么样的？
或者更一般地说，它的目的是什么，如何使用它？
1条答案
按热度按时间1aaf6o9v1#
我也不完全确定，但我知道你可以把文档字符串放进去。然后你可以做所有的选择，只要你继续复制列（没有表达式），元数据就可以原封不动地被提取出来。这对于在计算表上生成自动文档非常有用。