有没有可能收集股市和基金的行情,对以往的数据进行统计分析以支持证券投资?

2014-07-16 16:46:21 +08:00
 lu18887
最近开始看起了股票基金,不会看行情,想抓取股票价格和一些基金网站的估值以及净值保存起来,然后进行一些相关的数学分析。

现在的问题是:
1、有必要这样做吗?
2、有没有什么经济快捷的方式(SAE?GAE? VPS ?)
3、存储数据的方式(云数据库 OR VPS数据库集群?)
4、通过评估基金网站的估算价格和日终实际价格的偏差度来给基金评级,偏差越小说明基金网站的估值越准确可以跟着基金网站的涨跌决定买入卖出,这种分析可行吗?
5、 股票和基金的价格,从什么渠道拿是最快最新的?爬虫抓数据?

有钱途又有点技术含量的东西,最有吸引力了有木有!
6822 次点击
所在节点    投资
31 条回复
txlty
2014-07-16 16:59:24 +08:00
不是有没有可能,而是你说的这些,已经是金钱世界的基础。
华尔街的金融市场,本质上是一群数学天才编写的程序在博弈。
lu18887
2014-07-16 17:02:15 +08:00
那些是金融市场的食物链高端了,先在低端吃渣渣……
Johnny
2014-07-16 17:06:22 +08:00
不需要抓取, 这部分数据都是售卖的,历年数据都有!
halczy
2014-07-16 17:11:30 +08:00
skybr
2014-07-16 17:13:39 +08:00
很多机器学习和数据分析的书上都有基于logistic回归等算法预测股票走向的. 不过问题一是僵化使用是玩不过专业的, 二是股票基金的大行情主要是基于消息面, 这是不可预测的.
txlty
2014-07-16 17:17:47 +08:00
imn1
2014-07-16 17:19:15 +08:00
数据分析分为定性分析和定量分析
对于证券——
定性分析就是基本面分析,各种资料和金融行业评估,中国的定性分析报告必须要考虑道德诚信因素
定量分析就是纯证券价格的数学分析

没有明确的算法有数据也没什么用
有明确的算法也要有明确的操盘方法,不然也是没用
抓取的数据不如购买,也不会太贵,现在很难抓到较久远的历史数据的

注意:期货是不能只用纯数学分析的,除非你能把时间作为一个维度纳入计算
期货的操盘方法和股票基金也完全不同
kunimi
2014-07-16 17:33:12 +08:00
股票的话:
日线数据,Yahoo! Fiance就可以抓取,格式很好,可惜复权价格貌似不是很准。我记得Pandas中已经内置了这样的函数。
tick级的数据,免费的话就去股票软件中下载历史数据,然后在网上搜个转换工具或是自己研究格式做转换。

当然了,买数据是最快也是最省心,真要想开发一套自己的股票交易系统,这点投资还是必须的。
lu18887
2014-07-16 17:34:42 +08:00
@imn1 没有搞期货,期货死太快了……就想用自己的知识想办法换点钱,实在不行就交点低智商税,然后再奋发图强也好啊!先把数据搞到手……
flyever
2014-07-16 17:39:45 +08:00
中国的股市是脱离统计规律的吧……不可控因素太多
bobopu
2014-07-16 17:43:04 +08:00
你这玩意肯定还没我自己挑出的股票做得好。话说今年做的几只都还不错,平均每只收益能稳定在7个点左右。
lu18887
2014-07-16 17:46:08 +08:00
@kunimi
@Johnny 恩,我会考虑买历史数据的!
lu18887
2014-07-16 17:54:56 +08:00
@bobopu 恩,刚开始肯定是丑陋的,但是股票多了肯定看不过来的。
@flyever 就算有不可控因素,大部分还是有规律的
@skybr 不需要太专业,想先做出来
resettarget
2014-07-16 20:20:48 +08:00
有些年前,我在公司班车上听到两人对话,主题跟楼主的类似,到现在别的记不得了,但还是忘不了其中一个人蹿了句“交易量温和放大”,这么多年过去了,不知道为什么,总是对这个词,这个场景......
akfish
2014-07-16 21:18:51 +08:00
有,方法很多。大学时认识一教授就是做这个的,他用的是时序数据挖掘。
国外好多投资公司有大量秘密的算法搞自动化交易,曾经TED看到过,量子基金雇佣了大量冷战时期搞隐形飞机雷达截面分析的专家去做对冲基金的交易算法,因为数学模型极其相似。
grindsgears
2014-07-16 23:36:13 +08:00
hahahahahhahahahahahahha终于说道了我的职业,, day trader,, lol,,
肯定是有用的,, 你说的属于是backtesting,数据没有那么贵,我有近十年的ES, CL , NQ, TF, YM,等等 和几乎全部的FOREX的data,精确到tick,你可以用python,也可以用matlab来用machine learning之类的东西来算。我现在用multicharts,可以很精准的做backtesting,但是,市场一直是变化的,我有跑出来all the way up的曲线,但是在真实市场却表现不好,why?因为市场一直在运动,一直在变,所以还有做walk forward等等,, 再高级一点,研究研究套利,最简单的来说,如果今晚美股收盘,ES下跌,那么有很大可能,明早开盘,沪深也下跌, BDI(波罗的海指数)下跌,那么A股关于船运的股票也可能下跌, 再来,就是hedge,比如,我short EUR/USD(欧元对美金),并同时long一单(es 迷你标普股指期货)。最后,你会发现,你可以同时做N个市场,用N个策略,我们全是写好策略,然后放到服务器跑的,不手动交易,当然,为了速度,要离交易所越近越好。
well,说的比较乱,总而言之
1,。绝对有必要
2,要的国外数据基本可以找tickdata.com买,或者我可以给你点,国内的基本都是日线,不清楚
3,最新的价格,最快当然是从数据提供商,而不是你的券商那里,最好选场内的,我现在用rithmic ,以前用过IQFEED, 这点很重要,因为rithmic和iqfeed的数据是没有延时的(大概15微秒左右到我的服务器),而且券商的数据是有filter,简单来说就不是真实的数据,当然日线之类的无所谓。
4,即使你计算出一种策略,未必对将来的市场是有效的,所以你可以用模拟账户去做forward testing。
5,就美国市场而言,70%的交易已经是电脑算法完成,但是,只是提供更好的流动性而已,大部分都是HFT(高频交易)。 但是,市场永远是市场,永远有一定的规律
祝你好运。。
Ultratude
2014-07-17 06:13:57 +08:00
@grindsgears 美国 HFT 最近不行啊,搞搞欧洲吧。
wanjun
2014-07-17 09:03:36 +08:00
你说的是这个么?

http://www.chinascopefinancial.com.cn/

我们公司开发了5年的产品,

目前还是免费使用。
lu18887
2014-07-17 09:04:26 +08:00
@wanjun 好东西!
Quaintjade
2014-07-17 09:41:42 +08:00
数据容易得到,处理数据的方法才是关键。
你能想到的绝大部分算法/模型,都早已有大量人在用,甚至早已被抛弃。
另外,中国的股市真说不上有啥规律,至少数据上。玩数据的模型远不如分析各种消息,当然最好是去企业实地考察。某个过劳死的高业绩基金经理就是这么干的。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/122954

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX