如何将 SQL 数据加载到 Hortonworks 中？

Question

我已经在我的电脑上安装了Hortonworks Sandbox。我还尝试了使用CSV文件，以表格结构的方式获取数据（使用Hive + Hadoop），这部分已经OK了。现在，我想将我的当前SQL数据库迁移到Sandbox中（MS SQL 2008 r2）。我该如何做？我还想连接到我的项目（VS 2010 C#）。

是否可以通过ODBC连接？

我听说sqoop用于从SQL传输数据到Hadoop，那么我该如何使用sqoop进行此迁移？

- Haris N I

Answer 1

你可以编写自己的任务来迁移数据。但是Sqoop会更方便。为此，您需要在您的情况下下载 Sqoop和适当的连接器，Microsoft SQL Server Connector for Apache Hadoop。您可以从这里下载它。请查看Sqoop用户指南。它包含所有详细信息。

而Hive确实支持ODBC。您可以在此页面上找到更多信息。

- Tariq

---

你也可以尝试使用 Teland。 - Nishant

Answer 2

我写下了在Hortonworks Sandbox中安装JDBC驱动并使其工作的步骤: http://hortonworks.com/community/forums/topic/import-microsoft-sql-data-into-sandbox/ 要在您的C#项目中连接到Hadoop，您可以使用来自http://hortonworks.com/thankyou-hdp13/#addon-table的Hortonworks Hive ODBC驱动程序。阅读PDF（也在该页面上）以了解其工作原理（我使用Hive Server Type 2和用户名sandbox）。

- kloarubeek

---

在当前的沙盒中没有 /usr/lib/sqoop 目录 @kloarubeek。我应该创建它还是在 /home/sqoop 目录下创建一个 lib 文件夹？ - webDEVILopers

如何找到当前路径解决方案：http://de.hortonworks.com/community/forums/topic/hdp-2-2-sandbox-could-not-find-sqoop-folder/ - webDEVILopers