天道酬勤,学无止境

java.lang.ClassNotFoundException: Class org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe not found in Hive

问题

我正在尝试在配置单元中处理多字符分隔符。

我已经成功创建了一个相同的表

create external table showtmp3(doc_name STRING,doc_content STRING) row format SERDE 'org.apache.hadoop.hive.serde2.MultiDelimitSerDe' WITH SERDEPROPERTIES ('field.delim'='#a#') location '/unmesha/OUT';

然后我需要发出如下查询。

 INSERT OVERWRITE DIRECTORY '/unmesha/OUT_tmpShowData' SELECT * showtmp3 limit 10;

但它给了我下面的错误

Error: java.lang.RuntimeException: Error in configuring object
    at org.apache.hadoop.util.ReflectionUtils.setJobConf(ReflectionUtils.java:109)
    at org.apache.hadoop.util.ReflectionUtils.setConf(ReflectionUtils.java:75)
    at org.apache.hadoop.util.ReflectionUtils.newInstance(ReflectionUtils.java:133)
    at org.apache.hadoop.mapred.MapTask.runOldMapper(MapTask.java:449)
    at org.apache.hadoop.mapred.MapTask.run(MapTask.java:343)
    at org.apache.hadoop.mapred.YarnChild$2.run(YarnChild.java:163)
    at java.security.AccessController.doPrivileged(Native Method)
    at javax.security.auth.Subject.doAs(Subject.java:415)
    at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1671)
    at org.apache.hadoop.mapred.YarnChild.main(YarnChild.java:158)
Caused by: java.lang.reflect.InvocationTargetException
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:601)
    at org.apache.hadoop.util.ReflectionUtils.setJobConf(ReflectionUtils.java:106)
    ... 9 more
Caused by: java.lang.RuntimeException: Error in configuring object
    at org.apache.hadoop.util.ReflectionUtils.setJobConf(ReflectionUtils.java:109)
    at org.apache.hadoop.util.ReflectionUtils.setConf(ReflectionUtils.java:75)
    at org.apache.hadoop.util.ReflectionUtils.newInstance(ReflectionUtils.java:133)
    at org.apache.hadoop.mapred.MapRunner.configure(MapRunner.java:38)
    ... 14 more
Caused by: java.lang.reflect.InvocationTargetException
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:601)
    at org.apache.hadoop.util.ReflectionUtils.setJobConf(ReflectionUtils.java:106)
    ... 17 more
Caused by: java.lang.RuntimeException: Map operator initialization failed
    at org.apache.hadoop.hive.ql.exec.mr.ExecMapper.configure(ExecMapper.java:153)
    ... 22 more
Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.ClassNotFoundException: Class org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe not found
    at org.apache.hadoop.hive.ql.exec.MapOperator.getConvertedOI(MapOperator.java:323)
    at org.apache.hadoop.hive.ql.exec.MapOperator.setChildren(MapOperator.java:333)
    at org.apache.hadoop.hive.ql.exec.mr.ExecMapper.configure(ExecMapper.java:122)
    ... 22 more
Caused by: java.lang.ClassNotFoundException: Class org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe not found
    at org.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:2018)
    at org.apache.hadoop.hive.ql.plan.PartitionDesc.getDeserializer(PartitionDesc.java:136)
    at org.apache.hadoop.hive.ql.exec.MapOperator.getConvertedOI(MapOperator.java:297)
    ... 24 more


FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

我应该下载任何罐子并放在某个位置吗?

请建议

回答1

这可能是您正在寻找的:http://grepcode.com/file/repo1.maven.org/maven2/org.apache.hive/hive-contrib/0.14.0/org/apache/hadoop/hive/contrib /serde2/MultiDelimitSerDe.java

您可以从 Maven 存储库下载原始jar :https://mvnrepository.com/artifact/org.apache.hive/hive-contrib/0.14.0

下载此 jar 文件并将其放入集群所有节点的 hive /lib文件夹中。 这应该可以解决问题

回答2
add JAR /opt/cloudera/parcels/CDH <version> /jars/hive-contrib.jar
(or)
add jar /usr/lib/hive/lib/hive-contrib-<version>.jar;

受限制的 HTML

  • 允许的HTML标签:<a href hreflang> <em> <strong> <cite> <blockquote cite> <code> <ul type> <ol start type> <li> <dl> <dt> <dd> <h2 id> <h3 id> <h4 id> <h5 id> <h6 id>
  • 自动断行和分段。
  • 网页和电子邮件地址自动转换为链接。

相关推荐
  • Android Studio 启动失败 - ClassNotFoundException: com.intellij.ide.plugins.PluginManager(Android Studio Start Failed - ClassNotFoundException: com.intellij.ide.plugins.PluginManager)
    问题 在新的 Win8.1x64 机器上安装 Android Studio 后,每当我尝试启动它时,我都会收到ClassNotFoundException: com.intellij.ide.plugins.PluginManager并且 Studio 无法启动。 我试过解压而不是安装,多次重启电脑,清理所有与Android Studio相关的设置和文件,仍然没有结果。 我已经安装了最新的 JDK 和 SDK。 JAVA_HOME变量也被设置。 知道发生了什么吗? 它已经让我发疯了。 我将不胜感激任何帮助! 以下是我尝试启动 Android Studio 时随机出现的三个不同的错误。 java.lang.ClassNotFoundException: com.intellij.ide.plugins.PluginManager at com.intellij.util.lang.UrlClassLoader.findClass(UrlClassLoader.java:148) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) at java.lang.Class.forName0(Native Method
  • 是什么原因造成的?NoClassDefFoundError和ClassNotFoundException之间有什么区别?(What causes and what are the differences between NoClassDefFoundError and ClassNotFoundException?)
    问题 NoClassDefFoundError和ClassNotFoundException什么区别? 是什么导致它们被抛出? 如何解决? 在修改现有代码以包括新的jar文件时,我经常遇到这些throwables。 我在客户端和服务器端都通过Webstart分发了一个Java应用程序。 我遇到的可能原因: 客户端代码未包含在build.xml中的软件包我们正在使用的新jar缺少运行时类路径版本与先前的jar冲突 当我今天遇到这些问题时,我采取了走错一步的方法来使事情顺利进行。 我需要更多的清晰度和理解。 回答1 与Java API规范的区别如下。 对于ClassNotFoundException: 当应用程序尝试使用其字符串名称通过其字符串名称加载类时抛出: 类Class的forName方法。 类ClassLoader的findSystemClass方法。 类ClassLoader的loadClass方法。 但是找不到具有指定名称的类的定义。 对于NoClassDefFoundError: 如果Java虚拟机或ClassLoader实例尝试加载类的定义(作为常规方法调用的一部分或使用新表达式创建新实例的一部分)而抛出,则ClassLoader的定义。 当前正在编译的类在编译时就存在搜索到的类定义,但是无法再找到该定义。 因此
  • 使用 Java 反射动态创建类,java.lang.ClassNotFoundException(Dynamically class creating by using Java Reflection, java.lang.ClassNotFoundException)
    问题 我想在java中使用反射,我想做第三个类将从控制台读取类的名称作为字符串。 在读取类的名称时,它将自动和动态地(!)生成该类并调用其writeout方法。 如果该类未从输入中读取,则不会对其进行初始化。 我写了那些代码,但我总是接受“ java.lang.ClassNotFoundException ”,我不知道如何修复它。 谁能帮我? class class3 { public Object dynamicsinif(String className, String fieldName, String value) throws Exception { Class cls = Class.forName(className,true,null); Object obj = cls.newInstance(); Field fld = cls.getField(fieldName); fld.set(obj, value); return obj; } public void writeout3() { System.out.println("class3"); } } public class Main { public static void main(String[] args) throws Exception { System.out.println("enter
  • 无法实例化应用程序导致:java.lang.ClassNotFoundException:在路径上找不到类:DexPathList(Unable to instantiate application Caused by: java.lang.ClassNotFoundException: Didn't find class on path: DexPathList)
    问题 今天我遇到了一个奇怪的问题,我的应用程序突然停止在我插入的 USB 设备上工作。 但是,它可以在其他真实设备和模拟器设备上正常运行。 屏幕上的错误对话框和往常一样:不幸的是“您的应用程序名称”已停止。 为了获取错误消息,我在调试模式下运行我的应用程序并看到: FATAL EXCEPTION: main Process: com.yourapp.packagename, PID: 20036 java.lang.RuntimeException: Unable to instantiate application com.android.tools.fd.runtime.BootstrapApplication: java.lang.IllegalStateException: java.lang.ClassNotFoundException: android.support.multidex.MultiDexApplication at android.app.LoadedApk.makeApplication(LoadedApk.java:676) at android.app.ActivityThread.handleBindApplication(ActivityThread.java:6294) at android.app.ActivityThread.access
  • AndroidJavaException:java.lang.ClassNotFoundException:com.google.android.gms.ads.MobileAds(AndroidJavaException: java.lang.ClassNotFoundException: com.google.android.gms.ads.MobileAds)
    问题
  • java.lang.ClassNotFoundException:找不到类(java.lang.ClassNotFoundException: Didn't find class)
    问题
  • com.mysql.jdbc.Driver what to do?
    I am getting this when i try to launch our java server: java.lang.ClassNotFoundException: com.mysql.jdbc.Driver But i have the mysql-connector-java-5.1.22-bin.jar in the same folder where the script is, and making this when i run the script: java -cp mysql-connector-java-5.1.22-bin.jar -jar AvatarServer.jar But still getting this. What to do? I am using af CentOS server. root@host [/home/nagoom/Server_Example]# java -cp mysql-connector-java-5.1.22-bin.jar -jar AvatarServer.jar ************************ ** FIRING UP SERVER! ** ************************ Running MySQLChatMessageSaver java.lang
  • ClassNotFoundException 与 NoClassDefFoundError(ClassNotFoundException vs NoClassDefFoundError)
    问题 我已经浏览过这个线程 NoClassDefFoundError 和 ClassNotFoundException 之间的原因和区别是什么? 这是线程中具有最大 ups 的 ans 之一是: NoClassDefFoundError :"所以,似乎在成功编译源时发生了 NoClassDefFoundError ,但在运行时却找不到所需的类文件。这可能是在 JAR 文件的分发或生产中可能发生的事情,其中​​未包含所有必需的类文件。” ClassNotFoundException :至于 ClassNotFoundException,它似乎源于尝试在运行时对类进行反射调用,但程序试图调用的类不存在。 我做了一个小实验。 我创建了一个主类A 类并尝试从它调用其他类B类,编译成功。 然后我删除了在 A 类中被调用的 B 类。我得到了java.lang.ClassNotFoundException但根据步骤中的答案,我应该得到 NoClassDefFoundError(源代码编译成功,但在运行时找不到类文件)谁能解释我在对线程中的 ans 的解释中缺少什么? package com.random; public class A { public static void main(String[] args) { B b= new B(); } } package com.random
  • 无法运行 android 测试套件:线程“main”中的异常 java.lang.ClassNotFoundException(Can't run android test suite: Exception in thread "main" java.lang.ClassNotFoundException)
    问题 我有 2 个测试类需要在测试套件上运行,一个是RestaurantModelTest另一个是CartModelTest.class : @Config(sdk = 16, manifest = "src/main/AndroidManifest.xml") @RunWith(RobolectricTestRunner.class) public class RestaurantModelTest { //setUp code here... @Test public void testFindByLocation() throws Exception { //test code here } } 所以我在网上学习了一些教程,他们指定使用我要测试的 2 个类创建一个像这样的 TestSuite 类: import org.junit.runner.RunWith; import org.junit.runners.Suite; @RunWith(Suite.class) @Suite.SuiteClasses({ RestaurantModelTest.class, CartModelTest.class }) public class ModelsTestSuite { } 然后我必须创建一个 TestSuiteRunner 类: import org.junit
  • java.lang.ClassNotFoundException 或无法找到或加载主类错误(Either java.lang.ClassNotFoundException or Could not find or load main class error)
    问题 第一次尝试在 Windows 下运行一些 Java 代码,我得到了: D:\Tmp>java JDBC_SQLServer Picked up _JAVA_OPTIONS: -Xmx512M java.lang.ClassNotFoundException: com.microsoft.sqlserver.jdbc.SQLServerDriver at java.net.URLClassLoader.findClass(Unknown Source) at java.lang.ClassLoader.loadClass(Unknown Source) at sun.misc.Launcher$AppClassLoader.loadClass(Unknown Source) at java.lang.ClassLoader.loadClass(Unknown Source) at java.lang.Class.forName0(Native Method) at java.lang.Class.forName(Unknown Source) at JDBC_SQLServer.main(JDBC_SQLServer.java:19) 即,java 找到了 main 但没有找到 lib。 现在, - D:\Tmp>java -classpath "C:\Program
  • java.lang.ClassNotFoundException: com.caucho.vfs.Path(java.lang.ClassNotFoundException: com.caucho.vfs.Path)
    问题 我创建了一个 PHP Liferay Portlet 并在 portlet.xml 中添加了这个类: <portlet-class>com.liferay.util.bridges.php.PHPPortlet</portlet-class> 当我部署 portlet 时,我收到此错误: com.liferay.portal.kernel.deploy.hot.HotDeployException: Error registering portlets for nsFileUpload-portletnsFileUpload-portlet at com.liferay.portal.kernel.deploy.hot.BaseHotDeployListener.throwHotDeployException(BaseHotDeployListener.java:46) at com.liferay.portal.deploy.hot.PortletHotDeployListener.invokeDeploy(PortletHotDeployListener.java:127) at com.liferay.portal.deploy.hot.HotDeployImpl.doFireDeployEvent(HotDeployImpl.java:205) at com
  • java.lang.ClassNotFoundException:日食中的 org.apache.hadoop.hive.jdbc.HiveDriver(java.lang.ClassNotFoundException: org.apache.hadoop.hive.jdbc.HiveDriver in eclipse)
    问题
  • Android Studio Start Failed - ClassNotFoundException: com.intellij.ide.plugins.PluginManager
    After installing Android Studio on a new Win8.1x64 machine, whenever I try to launch it I get a ClassNotFoundException: com.intellij.ide.plugins.PluginManager and Studio does not start. I have tried unzipping instead of installing, restarting the computer several times, cleaning all Android Studio related settings and files, still no result. I have installed the latest JDK and the SDK. JAVA_HOME variable is set as well. Any idea what is going on? It's driving me nuts already. I would appreciate any help! Here are the three different errors that randomly come up when I try to launch Android
  • com.mysql.jdbc.Driver 做什么?(com.mysql.jdbc.Driver what to do?)
    问题 当我尝试启动我们的 java 服务器时,我得到了这个:java.lang.ClassNotFoundException: com.mysql.jdbc.Driver 但是我在脚本所在的同一文件夹中有 mysql-connector-java-5.1.22-bin.jar,并在我运行脚本时执行此操作: java -cp mysql-connector-java-5.1.22-bin.jar -jar AvatarServer.jar 但仍然得到这个。 该怎么办? 我使用的是 CentOS 服务器。 root@host [/home/nagoom/Server_Example]# java -cp mysql-connector-java-5.1.22-bin.jar -jar AvatarServer.jar ************************ ** FIRING UP SERVER! ** ************************ Running MySQLChatMessageSaver java.lang.ClassNotFoundException: com.mysql.jdbc.Driver at java.net.URLClassLoader$1.run(URLClassLoader.java:202) at java.security
  • MultiDex 问题:java.lang.ClassNotFoundException:在路径上找不到类:DexPathList(MultiDex issue: java.lang.ClassNotFoundException: Didn't find class on path: DexPathList)
    问题 我的应用程序遇到问题:如果我在 Android Studio Instant Run 中停用,我的应用程序在启动时会因堆栈跟踪而崩溃: 12-29 13:36:37.876 4549-4549/com.mycoolapp.debug E/AndroidRuntime: FATAL EXCEPTION: main Process: com.mycoolapp.debug, PID: 4549 java.lang.RuntimeException: Unable to instantiate activity ComponentInfo{com.mycoolapp.debug/com.myapp.SplashScreenActivity}: java.lang.ClassNotFoundException: Didn't find class "com.myapp.SplashScreenActivity" on path: DexPathList[[zip file "/system/framework/android.test.runner.jar", zip file "/data/app/com.mycoolapp.debug-2/base.apk"],nativeLibraryDirectories=[/data/app/com.mycoolapp.debug-2
  • WAS 7.0 中的奇怪行为:java.lang.ClassNotFoundException:class java.lang.NullPointerException:null(Odd behavior in WAS 7.0: java.lang.ClassNotFoundException: class java.lang.NullPointerException: null)
    问题 我正在使用 WAS 7.0,我发现了这个错误: [27/10/13 11:55:06:727 CET] 00000023 servlet E com.ibm.ws.webcontainer.servlet.ServletWrapper run [Servlet Error]-[class java.lang.NullPointerException: null]: java.lang.ClassNotFoundException: class java.lang.NullPointerException: null at java.beans.Beans.instantiate(Beans.java:190) at java.beans.Beans.instantiate(Beans.java:75) at com.ibm.ws.webcontainer.servlet.ServletWrapper$1.run(ServletWrapper.java:1909) at com.ibm.ws.security.util.AccessController.doPrivileged(AccessController.java:118) at com.ibm.ws.webcontainer.servlet.ServletWrapper.loadServlet
  • java.lang.ClassNotFoundException: 没有找到类“com.life.Life”(java.lang.ClassNotFoundException: Didn't find a class “com.life.Life”)
    问题 我试图通过DexClassLoader从jar 文件加载一个类: public class AndroidClassLoader implements ClassLoader { private Class class1; @Override public Class execute(File file, String packge) { class1 = null; try{ DexClassLoader loader = new DexClassLoader(file.toURI().toURL().toString(), FXActivity.getInstance().getDir("outdex", 0).getAbsolutePath(), null, FXActivity.getInstance().getClassLoader()); class1 = loader.loadClass(packge); }catch(Exception e){ e.printStackTrace(); } return class1; } } 运行上面的代码后,会抛出一个错误: java.lang.ClassNotFoundException: Didn't find a class "com.life.Life" of Path: DexPathList [[zip
  • 线程“main”中的异常 java.lang.ClassNotFoundException:(Exception in thread “main” java.lang.ClassNotFoundException:)
    问题 我最近安装了 intellij IDEA 14.0 并确保一切正常,我创建了一个简单的 Hello World 程序。 我不明白为什么输出不正确以及为什么会出现此错误。 如果有人可以请帮助那就太好了。 这是程序: public class Hello { public static void main(String[] args) { System.out.println("Hello World!"); } } 这是错误: Exception in thread "main" java.lang.ClassNotFoundException: Hello at java.net.URLClassLoader$1.run(URLClassLoader.java:372) at java.net.URLClassLoader$1.run(URLClassLoader.java:361) at java.security.AccessController.doPrivileged(Native Method) at java.net.URLClassLoader.findClass(URLClassLoader.java:360) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at sun.misc
  • 如何在 Android Studio 中解决 ClassNotFoundException(How to resolve ClassNotFoundException in Android Studio)
    问题 我最近将我的项目从 Eclipse 迁移到了 Android Studio。 早些时候一切正常,但最近当我再次开始工作时,我无法启动该应用程序。 它总是向我显示同样的错误。 我没有在应用程序级别进行任何更改,仍然得到相同的结果。 这是我得到的日志 FATAL EXCEPTION: main Process: com.example.android, PID: 6977 java.lang.RuntimeException: Unable to instantiate application com.example.android.MobApplication: java.lang.ClassNotFoundException: Didn't find class "com.example.android.MobApplication" on path: DexPathList[[zip file "/data/app/com.example.android-1/base.apk"],nativeLibraryDirectories=[/vendor/lib, /system/lib]] at android.app.LoadedApk.makeApplication(LoadedApk.java:601) at android.app.ActivityThread
  • java.lang.ClassNotFoundException:com.mysql.jdbc.Driver [重复](java.lang.ClassNotFoundException:com.mysql.jdbc.Driver [duplicate])
    问题 这个问题已经在这里有了答案: 将Java连接到MySQL数据库(14个答案) 2年前关闭。 我在尝试运行代码时遇到异常java.lang.ClassNotFoundException , 我的密码 try { Class.forName("com.mysql.jdbc.Driver"); Connection con=DriverManager.getConnection("jdbc:mysql://localhost:3306/simple", "root","root"); Statement stmt=con.createStatement(); String query="SELECT * FROM CUST"; ResultSet rs=stmt.executeQuery(query); while(rs.next()) { System.out.print(rs.getString("CUST_NAME") +" "); System.out.print(rs.getString(2) +" "); System.out.print(rs.getString(3) +" "); } rs.close(); stmt.close(); con.close(); } catch (ClassNotFoundException e) { e