关于：sqoopの话题！

11080

解决sqoop import 导入到hive后数据量变多的问题

曾经有你发布于 2020-12-31 09:32
收藏 sqoop 导入hive 数据量变多

使用sqoop import 命令从postgresql导入数据到hive中，发现数据行数变多了，但是任务没有跑错，非常奇怪。导入语句为：sqoop import --connect jdbc:postgresql://*.*.*.*:5432/database_name --username name111 --password password111 --table t..

11103

解决sqoop从postgresql拉数据,报错TCP/IP连接的问题

等无此人发布于 2020-12-31 09:54
收藏 sqoop postgresql拉数据 TCP/IP连接

问题：sqoop从postgresql拉数据，在执行到mapreduce时报错Connection refused. Check that the hostname and port are correct and that the postmaster is accepting TCP/IP connections问题定位过程：1、postgresql 5432端口已开放，执行任务的节..

11243

sqoop 实现将postgresql表导入hive表

冉是非发布于 2020-12-31 09:24
收藏 sqoop postgresql表导入hive表

使用sqoop导入数据至hive常用语句直接导入hive表sqoop import --connect jdbc:postgresql://ip/db_name--username user_name --table table_name --hive-import -m 5 内部执行实际分三部，1.将数据导入hdfs（可在hdfs上找到相应目录），2.创建hive..

11104

sqoop读取postgresql数据库表格导入到hdfs中的实现

芋头焖排骨发布于 2020-12-31 09:45
收藏 sqoop postgresql表格导入hdfs

最近再学习spark streaming做实时计算这方面内容，过程中需要从后台数据库导出数据到hdfs中，经过调研发现需要使用sqoop进行操作，本次操作环境是Linux下。首先确保环境安装了Hadoop和sqoop，安装只需要下载，解压以及配置环境变量，这里不多说了..

11140

sqoop export导出 map100% reduce0% 卡住的多种原因及解决

陌路离殇发布于 2021-01-01 15:07
收藏 sqoop export map100% reduce0% 卡住

我称这种bug是一个典型的“哈姆雷特”bug，就是指那种“报错情况相同但网上却会有各种五花缭乱解决办法”的bug，让我们不知道哪一个才是症结所在。先看导入命令：[root@host25 ~]# sqoop export --connect "jdbc:mysql://172.16.xxx.xxx:3306/dbnam..

新手任务

提出你的第一个问题

回答一个你擅长的问题

对内容进行点赞或者收藏

阅读声望与权限的规范

完善个人资料

广告位促销，月曝光三千万，10 元/天

关于：sqoopの话题！

标签动态

技术问答

专栏文章

云+社区

云+市场

技术讲座

标签百科

解决sqoop import 导入到hive后数据量变多的问题

解决sqoop从postgresql拉数据,报错TCP/IP连接的问题

sqoop 实现将postgresql表导入hive表

sqoop读取postgresql数据库表格导入到hdfs中的实现

sqoop export导出 map100% reduce0% 卡住的多种原因及解决

关于：sqoopの话题！

相关话题

推广链接

排行榜

热门话题