查看: 3010|回复: 2
打印 上一主题 下一主题

[WEBGL] 使用粒子系统来表现音乐旋律【转】

[复制链接]

5552

主题

2

听众

8万

积分

首席设计师

Rank: 8Rank: 8

纳金币
-1
精华
11

最佳新人 活跃会员 热心会员 灌水之王 突出贡献

跳转到指定楼层
楼主
发表于 2012-8-29 14:48:31 |只看该作者 |倒序浏览
最近一直想试着怎么用很炫的方式将音乐展现出来,而不只是用耳朵去听,前几天用three.js实现了一个粒子系统来表现音乐旋律。先放地址和视频!
www.qsc.zju.edu.cn/apps/bubble/lab/pupple/rhythm.html
three.js的example里有一个sparks.js是实现粒子系统的,包括emitter, life,velocity等一些东西。但是本着尽量用自己东西的原则,我用了之前自己写的一个动画lib去实现了一个粒子系统,当然没有他那个封装的那么好,那么详尽。
那个lib本来用在canvas动画或者dom动画上的,用了一个时间轴的概念,有life,transition属性,但是要表现一个效果好一点的粒子系统,还需要很多东西,比如一个粒子发射器(emitter),每个粒子消逝的动画等等。
关于粒子系统,milo大神有一篇非常详尽的文章用JavaScript玩转游戏物理(一)运动学模拟与粒子系统。

在WebGL里,对于数量非常庞大的粒子还有一种加速的手段,我们不需要新建那么多的Object,而是使用一个Object的每个顶点来作为粒子,因为在glsl里,我们可以使用 gl_PointSize 设置每个顶点的大小,甚至使用gl_PointCoord来设置每个顶点的纹理
如下:
VertexShader里:
gl_PointSize = size * ( 200.0 / length( mvPosition.xyz ) );FragmentShader里:
vec4 outColor = texture2D( texture, gl_PointCoord );于是就可以用这些顶点来模拟一个sprite效果的粒子了,当然,那些复杂构造的粒子是肯定不能这样做了。
音乐的展现
那怎么去展现一个音乐呢,我们怎么去获取音乐的旋律或者eq值?firefox和chrome都提供了借口,但是两个是完全不同的接口,chrome使用的是AudioContext,firefox的具体看这个https://wiki.mozilla.org/Audio_Data_API。要兼容两个接口实在是略麻烦,我又是一个很懒的人,于是就直接用soundmanager2了,soundmanager2是直接用flash的,又提供eq值,又提供waveform,刚好够用。
然后就比较简单了,将waveform的不同数据用不同大小,不同速度的粒子展现出来就行了,只是如果要取得比较好的效果的话还是要调很多东西的。
Extra
一个3d的eq展现,比较简单。


http://www.qsc.zju.edu.cn/apps/bubble/lab/pupple/visualizeeq.html

分享到: QQ好友和群QQ好友和群 腾讯微博腾讯微博 腾讯朋友腾讯朋友 微信微信
转播转播0 分享淘帖0 收藏收藏0 支持支持0 反对反对0
回复

使用道具 举报

435

主题

2

听众

6371

积分

高级设计师

Rank: 6Rank: 6

纳金币
6372
精华
0

最佳新人 活跃会员 热心会员 灌水之王 突出贡献

沙发
发表于 2012-9-6 10:05:04 |只看该作者
最喜欢粒子系统方面的资料
回复

使用道具 举报

ebuty    

0

主题

1

听众

56

积分

设计初学者

Rank: 1

纳金币
2
精华
0
板凳
发表于 2014-4-3 14:08:31 |只看该作者
可惜看不到效果,链接出错!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

手机版|纳金网 ( 闽ICP备2021016425号-2/3

GMT+8, 2024-11-26 22:45 , Processed in 0.092245 second(s), 28 queries .

Powered by Discuz!-创意设计 X2.5

© 2008-2019 Narkii Inc.

回顶部