账号密码登录
微信安全登录
微信扫描二维码登录

登录后绑定QQ、微信即可实现信息互通

手机验证码登录
找回密码返回
邮箱找回 手机找回
注册账号返回
其他登录方式
分享
  • 收藏
    X
    请问pySpark中怎么序列化一个对象集合为RDD?
    51
    0

    请问pySpark中怎么序列化一个对象集合为RDD?

    例如: 这种最简单的操作
    class test :

    data = 1
    def __init__(self):
        self.property=0
    
    def test2(self):
        print('hello')
    
    
    

    if name == '__main__':

    p1 = test()
    p2 = test()
    a = [p1,p2]
    sc = SparkContext('local[2]', 'test' )
    rdd = sc.parallelize(a)
    rdd.map(lambda x : x.property ).collect()
    sc.stop()
    2
    打赏
    收藏
    点击回答
        全部回答
    • 0
    • 西枫瘦马 普通会员 1楼
      502 Bad Gateway

      502 Bad Gateway


      nginx
    更多回答
    网站公告
    扫一扫访问手机版
    • 回到顶部
    • 回到顶部