2017-05-17 137 views
0

我正在制作一个软件,该软件应该从提供的url中检索网页的标题并尝试使用JSoup来实现该目标。 的联系大多来自YouTube和JSoup完美的作品和他们在一起,但偶尔的输入会以概率密度函数,像这样的形式:http://www.ninsheetmusic.org/download/pdf/2066 这时候,我得到以下异常:从pdf中获取html内容url(jsoup)

org.jsoup.UnsupportedMimeTypeException: Unhandled content type. Must be text/*, application/xml, or application/xhtml+xml. Mimetype=application/pdf, URL=http://www.ninsheetmusic.org/download/pdf/2066 
at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:689) 
at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:628) 
at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:260) 
at org.jsoup.helper.HttpConnection.get(HttpConnection.java:249) 
at core.Request.parseTitle(Request.java:54) 
at core.Request.<init>(Request.java:29) 
at core.GrakeBot.parseRequest(GrakeBot.java:161) 
at core.GrakeBot.onMessage(GrakeBot.java:59) 
at org.jibble.pircbot.PircBot.handleLine(PircBot.java:990) 
at org.jibble.pircbot.InputThread.run(InputThread.java:92) 

现在我把它JSoup不处理pdf,但有什么我可以在这里做,以避免这种异常,并获得网页标题?

这是我现在使用的代码:

private String parseTitle(String link) 
{ 
    Document doc = null; 
    String title = "Title could not be retrieved"; 

    if (getType() == RequestType.YOUTUBE) 
    { 
     try 
     { 
      doc = Jsoup.connect(getLink()).get(); 
      title = doc.getElementById("eow-title").text(); 
     } catch (IOException e) 
     { 
      e.printStackTrace(); 
     } 
     return title; 
    } 
    else if (getType() == RequestType.SHEET) 
    { 
     try 
     { 
      doc = Jsoup.connect(getLink()).get(); 
      title = doc.getElementsByTag("title").text(); 
     } catch (IOException e) 
     { 
      e.printStackTrace(); 
     } 
     return title; 
    } 
    else 
     return title; 
} 

回答

0

不能使用JSoup这一点。这不是HTML。我查看了源代码,并且收到的数据看起来像这样:
%PDF-1.5 %Çì¢ 5 0 obj <</Length 6 0 R/Filter /FlateDecode>> stream xœÍ\]\[³$GqÆö1áë˜à…GœQUf\]ý† Làp8¿¬xÀ+åÐ „1?ÉÿÒy©KöîYítŸÌîÙ¯«ºº.™YyëêßœÜÕÃÉñÿþã嫇÷œO¿üâ!~÷à®Îa©%Qá“?üƒ‡„pŠ Ã5åÓ+E.#£O~ò s5ýñù/~óP®Èÿä‚ýýòÕé? Ç—“Ï×RNü‚:Pk åþTü5”SJpÍpúàÕÃùk—þë!Ôk§þ…áwèÞœ¨·ñÑÃùëRéZJ8=&¹·_ŽW úS}óÒ\[j¾årÙ<í-•‘&3õ"8éóªwïnÀM-\]¡ä=¾ìÚ­béýMô¦èû<üè&rñÙYzQh\]ª¦\¡)ÙÙr…¦<Ù&t›*~>‘«Hq¬Ù78‹cÝ+œÅ›b…£8”h‹Åh‹Å¾$\[Üà,eS¬p{¿)V8Š\]ÞLKƒÂªïZ=bÞäef\[÷£Ï4¸$ÏO1Òo”YŒDG£´üò!æ:Ч)&ªçåžÈ÷D'“£-ƒ×{~ñ÷ú¨Ñ\[y×ôGAö7= ...

您必须使用库解析它。看完后,它看起来像Apache PDFBox是你想要的。此代码是从文档和未经考验的,但它看起来像你想要做什么:

PDDocument doc = PDDocument.load("http://www.ninsheetmusic.org/download/pdf/2066"); 
PDDocumentInformation info = doc.getDocumentInformation(); 
String title = info.getTitle(); 

剩下的唯一一件事就是安装Apache PDFBox的:)

+0

*“它看起来像Apache PDFBox的是你想要的“* - 严格来说,Apache PDFBox只是* OP可用于此任务的众多* PDF库之一... – mkl

+0

我觉得添加Apache PDFBox对于我的目标并不是最佳选择。 我可能会说这里真的很愚蠢,纠正我,如果我错了: 通过在Firefox中打开上述链接并打开页面检查器,我发现有一些HTML代码,实际上有一个标记。 (还有什么地方会firefox获取文本显示页面标题?) 有什么办法用jsoup访问该html代码并从那里检索标题? – <span class="text-secondary"> <small> <span></span> </small> </span> </p> </div> </div> </div> <div itemprop="comment" class="post-comment"> <div class="row"> <div class="col-lg-1"><span class="text-secondary">+0</span></div> <div class="col-lg-11"> <p class="commenttext">@RamzahBeoulve你可以打开一个普通的套接字连接,然后用JSoup解析。 – <span class="text-secondary"> <small> <span></span> </small> </span> </p> </div> </div> </div> </div> </div> </article> <div> <script async src="https://pagead2.googlesyndication.com/pagead/js/adsbygoogle.js"></script> <ins class="adsbygoogle" style="display:block" data-ad-client="ca-pub-6208739752673518" data-ad-slot="1038284119" data-ad-format="auto" data-full-width-responsive="true"></ins> <script> (adsbygoogle = window.adsbygoogle || []).push({}); </script> </div> </div> <div class="clearfix"> </div> <div class="relative-box"> <div class="relative">相关问题</div> <ul class="relative_list"> <li> 1. <a href="http://www.uwenku.com/question/p-xgxpzcdv-pd.html" target="_blank" title="从url重定向获取html内容"> 从url重定向获取html内容 </a> </li> <li> 2. <a href="http://www.uwenku.com/question/p-wfrexqpv-tg.html" target="_blank" title="从html中获取内容"> 从html中获取内容 </a> </li> <li> 3. <a href="http://www.uwenku.com/question/p-cwtsjdwk-ts.html" target="_blank" title="如何从Jsoup跨度获取内容"> 如何从Jsoup跨度获取内容 </a> </li> <li> 4. <a href="http://www.uwenku.com/question/p-oxewjemi-tx.html" target="_blank" title="Phonegap从PDF文件中获取内容"> Phonegap从PDF文件中获取内容 </a> </li> <li> 5. <a href="http://www.uwenku.com/question/p-ostbezgu-hp.html" target="_blank" title="从html获取图标(JSOUP)"> 从html获取图标(JSOUP) </a> </li> <li> 6. <a href="http://www.uwenku.com/question/p-yfikezvt-wo.html" target="_blank" title="从html,JSOUP获取tabledata"> 从html,JSOUP获取tabledata </a> </li> <li> 7. <a href="http://www.uwenku.com/question/p-vpnhrjkf-uh.html" target="_blank" title="无法在java中使用jsoup从html中提取内容?"> 无法在java中使用jsoup从html中提取内容? </a> </li> <li> 8. <a href="http://www.uwenku.com/question/p-bkqbpyut-bhe.html" target="_blank" title="使用JSoup提取HTML表格内容"> 使用JSoup提取HTML表格内容 </a> </li> <li> 9. <a href="http://www.uwenku.com/question/p-bdqrpzlj-we.html" target="_blank" title="jsoup从表中获取的URL TD"> jsoup从表中获取的URL TD </a> </li> <li> 10. <a href="http://www.uwenku.com/question/p-ebqzsgyo-bbm.html" target="_blank" title="使用jsoup从表中提取内容"> 使用jsoup从表中提取内容 </a> </li> <div> <script async src="https://pagead2.googlesyndication.com/pagead/js/adsbygoogle.js"></script> <ins class="adsbygoogle" style="display:block; text-align:center;" data-ad-layout="in-article" data-ad-format="fluid" data-ad-client="ca-pub-6208739752673518" data-ad-slot="4606349252"></ins> <script> (adsbygoogle = window.adsbygoogle || []).push({}); </script> </div> <li> 11. <a href="http://www.uwenku.com/question/p-qsybwzgo-bae.html" target="_blank" title="如何获取URL的HTML内容?"> 如何获取URL的HTML内容? </a> </li> <li> 12. <a href="http://www.uwenku.com/question/p-odtaktcl-vw.html" target="_blank" title="我如何从HTML文件中提取正文内容与jsoup"> 我如何从HTML文件中提取正文内容与jsoup </a> </li> <li> 13. <a href="http://www.uwenku.com/question/p-oqlqcaqt-boe.html" target="_blank" title="获取URL内容"> 获取URL内容 </a> </li> <li> 14. <a href="http://www.uwenku.com/question/p-mvfufwho-ru.html" target="_blank" title="仅从java中的url获取编码的html内容"> 仅从java中的url获取编码的html内容 </a> </li> <li> 15. <a href="http://www.uwenku.com/question/p-qfpxbyat-bkb.html" target="_blank" title="如何摆脱jsoup中的html,只提取html表格内容?"> 如何摆脱jsoup中的html,只提取html表格内容? </a> </li> <li> 16. <a href="http://www.uwenku.com/question/p-eqalwekg-es.html" target="_blank" title="JSOUP从div的同名中获取div内容"> JSOUP从div的同名中获取div内容 </a> </li> <li> 17. <a href="http://www.uwenku.com/question/p-tzxhhnpq-nv.html" target="_blank" title="从LOGSTASH读取PDF内容"> 从LOGSTASH读取PDF内容 </a> </li> <li> 18. <a href="http://www.uwenku.com/question/p-khuwlmyh-bhy.html" target="_blank" title="从外部url的iframe获取内容"> 从外部url的iframe获取内容 </a> </li> <li> 19. <a href="http://www.uwenku.com/question/p-vssrkilg-cv.html" target="_blank" title="从URL获取页面内容?"> 从URL获取页面内容? </a> </li> <li> 20. <a href="http://www.uwenku.com/question/p-dycoxxhh-pv.html" target="_blank" title="如何从URL异步获取内容?"> 如何从URL异步获取内容? </a> </li> <li> 21. <a href="http://www.uwenku.com/question/p-yrdexxvq-baa.html" target="_blank" title="从URL获取页面内容"> 从URL获取页面内容 </a> </li> <li> 22. <a href="http://www.uwenku.com/question/p-thjhdjlp-dq.html" target="_blank" title="从URL获取文件内容?"> 从URL获取文件内容? </a> </li> <li> 23. <a href="http://www.uwenku.com/question/p-blysxgch-bdv.html" target="_blank" title="PHP - 获取内容从外部URL"> PHP - 获取内容从外部URL </a> </li> <li> 24. <a href="http://www.uwenku.com/question/p-sbmpdpox-px.html" target="_blank" title="从(自己的网站的)URL获取HTML内容"> 从(自己的网站的)URL获取HTML内容 </a> </li> <li> 25. <a href="http://www.uwenku.com/question/p-ugjbxgyj-rn.html" target="_blank" title="从url使用jquery或javascript获取html内容"> 从url使用jquery或javascript获取html内容 </a> </li> <li> 26. <a href="http://www.uwenku.com/question/p-cyolecda-bna.html" target="_blank" title="如何从远程URL获取特定的HTML内容?"> 如何从远程URL获取特定的HTML内容? </a> </li> <li> 27. <a href="http://www.uwenku.com/question/p-gdfyfoxx-ew.html" target="_blank" title="使用JSOUP提取内容"> 使用JSOUP提取内容 </a> </li> <li> 28. <a href="http://www.uwenku.com/question/p-wtybaahd-zw.html" target="_blank" title="获取Itext中的pdf文件内容"> 获取Itext中的pdf文件内容 </a> </li> <li> 29. <a href="http://www.uwenku.com/question/p-grytpbsd-bnn.html" target="_blank" title="从URL中获取内容并将其放在容器中"> 从URL中获取内容并将其放在容器中 </a> </li> <li> 30. <a href="http://www.uwenku.com/question/p-fqwijqyo-ev.html" target="_blank" title="PHP获取URL内容"> PHP获取URL内容 </a> </li> </ul> </div> <div> <script async src="https://pagead2.googlesyndication.com/pagead/js/adsbygoogle.js"></script> <ins class="adsbygoogle" style="display:block" data-ad-format="autorelaxed" data-ad-client="ca-pub-6208739752673518" data-ad-slot="1575177025"></ins> <script> (adsbygoogle = window.adsbygoogle || []).push({}); </script> </div> <div class="padding-top-10"></div> </div> </div> <script type="text/javascript" src="http://img.uwenku.com/uwenku/script/side.js?t=1644592048176"></script> <script type="text/javascript" src="http://img.uwenku.com/uwenku/plugin/highlight/highlight.pack.js"></script> <link href="http://img.uwenku.com/uwenku/plugin/highlight/styles/docco.css" media="screen" rel="stylesheet" type="text/css" /> <script type="text/javascript"> $('pre').each(function(i, e) { hljs.highlightBlock(e, "<span class='indent'> </span>", false) }); </script> <div class="col-lg-3 col-md-4 col-sm-5"> <div id="rightTop"> <div class="row sidebar panel panel-default"> <div class="panel-heading font-bold"> 每日一句 </div> <div class="panel-body m-b-sm m-t-sm clearfix"> 每一个你不满意的现在,都有一个你没有努力的曾经。 </div> </div> <div class="row"> <script async src="https://pagead2.googlesyndication.com/pagead/js/adsbygoogle.js"></script> <ins class="adsbygoogle" style="display:block" data-ad-client="ca-pub-6208739752673518" data-ad-slot="5415218910" data-ad-format="auto" data-full-width-responsive="true"></ins> <script> (adsbygoogle = window.adsbygoogle || []).push({}); </script> </div> <div class="row sidebar panel panel-default"> <div class="panel-heading font-bold"> 最新问题 </div> <div class="m-b-sm m-t-sm clearfix"> <ul class="side_article_list"> <li class="side_article_list_item"> 1. <a href="http://www.uwenku.com/question/p-yjetlghp-mv.html" target="_blank" title="螺栓中的类型错误CMS"> 螺栓中的类型错误CMS </a> </li> <li class="side_article_list_item"> 2. <a href="http://www.uwenku.com/question/p-kqqxplja-ma.html" target="_blank" title="如何读取R中的多个csv文件,并使用fread函数跳过最后一行"> 如何读取R中的多个csv文件,并使用fread函数跳过最后一行 </a> </li> <li class="side_article_list_item"> 3. <a href="http://www.uwenku.com/question/p-bqpdgxhm-hn.html" target="_blank" title="从Flink 1.3.2升级到1.4.0 hadoop文件系统和路径问题"> 从Flink 1.3.2升级到1.4.0 hadoop文件系统和路径问题 </a> </li> <li class="side_article_list_item"> 4. <a href="http://www.uwenku.com/question/p-rsquypsa-ke.html" target="_blank" title="D3.js - 嵌套数据的作品,但选择不遵循"> D3.js - 嵌套数据的作品,但选择不遵循 </a> </li> <li class="side_article_list_item"> 5. <a href="http://www.uwenku.com/question/p-oljbtgar-dt.html" target="_blank" title="卡桑德拉CodecNotFoundException:编解码器找不到请求的操作"> 卡桑德拉CodecNotFoundException:编解码器找不到请求的操作 </a> </li> <li class="side_article_list_item"> 6. <a href="http://www.uwenku.com/question/p-hzfpqyed-eo.html" target="_blank" title="为什么我不能打印()?"> 为什么我不能打印()? </a> </li> <li class="side_article_list_item"> 7. <a href="http://www.uwenku.com/question/p-kgtdfutl-gg.html" target="_blank" title="图中不显示闪亮"> 图中不显示闪亮 </a> </li> <li class="side_article_list_item"> 8. <a href="http://www.uwenku.com/question/p-eahichhw-q.html" target="_blank" title="Django的css文件不起作用"> Django的css文件不起作用 </a> </li> <li class="side_article_list_item"> 9. <a href="http://www.uwenku.com/question/p-wtxobtnw-bk.html" target="_blank" title="无法从孩子"> 无法从孩子 </a> </li> <li class="side_article_list_item"> 10. <a href="http://www.uwenku.com/question/p-cecgwetc-bu.html" target="_blank" title="在页面加载时触发Javascript文本和图片预览"> 在页面加载时触发Javascript文本和图片预览 </a> </li> </ul> </div> </div> </div> <p class="article-nav-bar"></p> <div class="row sidebar article-nav"> <div class="row box_white visible-sm visible-md visible-lg margin-zero"> <div class="top"> <h3 class="title"><i class="glyphicon glyphicon-th-list"></i> 相关问题</h3> </div> <div class="article-relative-content"> <ul class="side_article_list"> <li class="side_article_list_item"> 1. <a href="http://www.uwenku.com/question/p-xgxpzcdv-pd.html" target="_blank" title="从url重定向获取html内容"> 从url重定向获取html内容 </a> </li> <li class="side_article_list_item"> 2. <a href="http://www.uwenku.com/question/p-wfrexqpv-tg.html" target="_blank" title="从html中获取内容"> 从html中获取内容 </a> </li> <li class="side_article_list_item"> 3. <a href="http://www.uwenku.com/question/p-cwtsjdwk-ts.html" target="_blank" title="如何从Jsoup跨度获取内容"> 如何从Jsoup跨度获取内容 </a> </li> <li class="side_article_list_item"> 4. <a href="http://www.uwenku.com/question/p-oxewjemi-tx.html" target="_blank" title="Phonegap从PDF文件中获取内容"> Phonegap从PDF文件中获取内容 </a> </li> <li class="side_article_list_item"> 5. <a href="http://www.uwenku.com/question/p-ostbezgu-hp.html" target="_blank" title="从html获取图标(JSOUP)"> 从html获取图标(JSOUP) </a> </li> <li class="side_article_list_item"> 6. <a href="http://www.uwenku.com/question/p-yfikezvt-wo.html" target="_blank" title="从html,JSOUP获取tabledata"> 从html,JSOUP获取tabledata </a> </li> <li class="side_article_list_item"> 7. <a href="http://www.uwenku.com/question/p-vpnhrjkf-uh.html" target="_blank" title="无法在java中使用jsoup从html中提取内容?"> 无法在java中使用jsoup从html中提取内容? </a> </li> <li class="side_article_list_item"> 8. <a href="http://www.uwenku.com/question/p-bkqbpyut-bhe.html" target="_blank" title="使用JSoup提取HTML表格内容"> 使用JSoup提取HTML表格内容 </a> </li> <li class="side_article_list_item"> 9. <a href="http://www.uwenku.com/question/p-bdqrpzlj-we.html" target="_blank" title="jsoup从表中获取的URL TD"> jsoup从表中获取的URL TD </a> </li> <li class="side_article_list_item"> 10. <a href="http://www.uwenku.com/question/p-ebqzsgyo-bbm.html" target="_blank" title="使用jsoup从表中提取内容"> 使用jsoup从表中提取内容 </a> </li> </ul> </div> </div> </div> </div> </div> </div> </div><!-- wrap end--> <!-- footer --> <footer id="footer"> <div class="bg-simple lt"> <div class="container"> <div class="row padder-v m-t"> <div class="col-xs-8"> <ul class="list-inline"> <li><a href="http://www.uwenku.com/contact">联系我们</a></li> <li>© 2020 UWENKU.COM</li> <li><a target="_blank" href="https://beian.miit.gov.cn/">沪ICP备13005482号-4</a></li> <li><script type="text/javascript" src="https://v1.cnzz.com/z_stat.php?id=1280101193&web_id=1280101193"></script></li> <li><a href="http://www.uwenku.com/" target="_blank" title="优文库">简体中文</a></li> <li><a href="http://hk.uwenku.com/" target="_blank" title="優文庫">繁體中文</a></li> <li><a href="http://ru.uwenku.com/" target="_blank" title="поле вопросов и ответов">Русский</a></li> <li><a href="http://de.uwenku.com/" target="_blank" title="Frage - und - antwort - Park">Deutsch</a></li> <li><a href="http://es.uwenku.com/" target="_blank" title="Preguntas y respuestas">Español</a></li> <li><a href="http://hi.uwenku.com/" target="_blank" title="कार्यक्रम प्रश्न और उत्तर पार्क">हिन्दी</a></li> <li><a href="http://it.uwenku.com/" target="_blank" title="IL Programma di chiedere Park">Italiano</a></li> <li><a href="http://ja.uwenku.com/" target="_blank" title="プログラム問答園区">日本語</a></li> <li><a href="http://ko.uwenku.com/" target="_blank" title="프로그램 문답 단지">한국어</a></li> <li><a href="http://pl.uwenku.com/" target="_blank" title="program o park">Polski</a></li> <li><a href="http://tr.uwenku.com/" target="_blank" title="Program soru ve cevap parkı">Türkçe</a></li> <li><a href="http://vi.uwenku.com/" target="_blank" title="Đáp ứng viên">Tiếng Việt</a></li> <li><a href="http://fr.uwenku.com/" target="_blank" title="Programme interrogation Park">Française</a></li> </ul> </div> </div> </div> </div> </div> </footer> <!-- / footer --> <script> var _hmt = _hmt || []; (function() { var hm = document.createElement("script"); hm.src = "https://hm.baidu.com/hm.js?f78a970f17b19a79fc477a3378096f29"; var s = document.getElementsByTagName("script")[0]; s.parentNode.insertBefore(hm, s); })(); </script> </body> </html>