小女子诡求(网络视频URL收集)

听他们说jayeye上很多高手,我工作时间不是长,一年吧。本人是学java软件开发的,

有一个开发,技术总监要我做,我真不知道从何下手,还说给我一个月时间解决。哎~~。。

想到了jayEye上的高手们,请求帮助,实在感激不尽。

项目开发是:网络视频的实现机制,以及网络视频的收集。。。。。。。。。。。

意思就是通过程序怎么把土豆或youkku等播放地址搞到手,地址要能播放的。
其实简单的 说就是这样

请高手们简单的说下,如果有资料书也可说下,网址之类的都行,我实在感激不尽。

能说清楚你想做什么么?
以前我们是做过一个 把浏览器的地址给程序 程序解析出视频播放地址
当初就是读网页,分析里面的HTML代码

BI?
你该寻求数据挖掘的高人..

你是想在互联网上挖掘数据对吧
程序开发现在已经区分成很多模块式的专有名词

所以你的问问你的朋友有没搞数据挖掘的. 亲自教你比较实在..

就是在土豆网上找链接 找到一个就打开 然后成功与否会给个参数
成功的就记下 也可以试着做下载操作
很多有防盗链的功能 还必须先了解.
你最好找个这方面的人问问.. q-q-群是个好去处
javaeye上反应速度比较慢 不适合解决这样的问题 你开发的时候遇到了具体的倒是适合这里
女孩子一般去问 应该会比较愿意回答的. 这个应该不是很难 找个数据挖掘的群 随便找个人应该都能搞定.

类似google爬虫似的,

你要先分析一个你们爬的页面结构,

根据这个页面结构来取得你要的数据。

这个是我年前弄的了,不知道关键标签还对不对,算是给你个思路了
本人菜鸟,轻拍砖
[url]http://zhang370588158-sina-com.iteye.com/blog/946164[/url]

有一个叫硕鼠的软件(可以百度搜一下),已经很好的实现了这个功能,基本上国内的大多数视频网站上的视频都可以用他解析并下载。
希望能帮到你。

:D 用q-q群里面搜数据挖掘噻 肯定一堆 ,公司不能上q 回家可以上的话倒是可以介绍两个人给你.. 这个应该比较简单,应该可以帮到你.

我QQ277674404...

不就成了视频地址爬虫了么 :evil: :evil: 站长这厮去年的爬虫爬得被电信封站过:wink: :lol: :lol: 找他就是了 :x :oops: :evil: :evil:

看你抓取的目的了,如果只是需要播放的路径的话,可以直接用正则去解析网址内容,获取embed标签就行,只需embed的内容就可以把视频嵌在网页里播放
如果是要视频文件呢,那必须分解网页里的swf
其实视频播放的原文件时flv后缀的流媒体文件,一般视频网址是不会把这个源文件暴露出来的

有个好的办法就是,找个大学的朋友,最好是偏向it方面的,使用校园bt,里边有很多的,我记得有个叫北京尚学堂的,主讲叫马士兵
或者在verycd里找找,看有没有

我不是给你留言了么.. 你去加那个人问噻

此网站全是抓取的www.renqi.com

String html = "";
URL url = new URL(theUrl);
HttpURLConnection connection2 = (HttpURLConnection) url.openConnection();
InputStreamReader reader = new InputStreamReader(connection2.getInputStream());
BufferedReader reader2 = new BufferedReader(reader);
while((inputLine = reader2.readLine()) != null){
html += inputLine;
}
在用正则表达式去掉不要的HTML内容
视频会议建议用FLEX做

建议可以看一下网页解析工具,,htmlparser。结合每个不同网站的情况,进行规则的配置抓取。

爬虫程序我写过半年不过是用ruby写的。分析html规则几行代码就搞定了。

:o commons-httpclient 应该在apache下面可以找到相关的jar包,应该有些例子,如果不明的话可以加我qq 269403844
以前收集过相关的东西,可以去借鉴一下

现成的软件有的是为啥非得自己做那,我真想不明白。
UUME以前我记得有一个flv地址嗅探器
还有个网站叫什么flvdownload也可以获取
另外每个视频门户都有专门的下载软件,直接下载不就完了。
视频的CDN数据分发,连接源地址都是经过严格的加密与HASH计算,你想得到不是那么容易的。即便是找到了也都是单线程,不允许用任何P2P软件下载。