icysword 发表于 2015-5-8 17:55:13

warmanky 发表于 2015-5-8 16:04 static/image/common/back.gif
统计下,这个帖子里谈大数据的有几个分得清结构化数据与非结构化数据的区别,有几个人清楚现在所谓的大数据 ...

说得好。

个人认为现在论坛内讨论的“大数据"泛指大规模结构化与非结构化数据的采集、统计及其应用。所谓的BI商业智能是应用的一种,建立在数据仓库以及根据数据仓库产生的数据挖掘结果之上,用于指导和实现企业和商业生产管理自动化。针对非结构化数据,最终还是需要结构化的元数据对其进行描述并与其它结构化数据一起应用。


2012年开始,社会各界言必称大数据和云计算,而真正意义上与老百姓生活密切相关的应用,要不就是老百姓还没意识到,要不就是没有实质成型形成生产力。

就非IT从业人士来说,要理解大数据应用能够带来的效能,需要一些社会学理论基础,原因即葡萄所说的所有数据是人的行为所产生的。大数据应用对人类社会的作用将影响人类组织行为,组织行为所产生的数据又反过来提供更多可供分析的数据,如此周而复始,加上数据物理传输介质的突破带来的反馈效率提高,我理解这就是葡萄所说的人类进化将被大数据应用加速。

对从业人士来说,那要学习的东西就多了。个人推荐人大经济论坛的相关学习分组。仅仅是Hadoop云计算平台,涉及的相关软件知识就不下几十门,一个计算机专业的研究生学习起来都需要很长时间,别说是非计算机专业人员了。所以要真正实现数据化社会,这方面的科普刻不容缓。葡萄老师在这方面进行了力所能及的推动和普及,所以还是很受大家欢迎的。


门外汉班门弄斧了,还请兄台指正。其实是应该有一位专业的老师来给坛友进行一次科普的。

icysword 发表于 2015-5-8 18:01:15

葡萄 发表于 2015-5-7 23:29 static/image/common/back.gif
我们这里是一月下旬通报的

这是14年的新闻了。上海政务数据共享2.0版已经出炉。

葡萄 发表于 2015-5-8 18:41:55

icysword 发表于 2015-5-8 18:01 static/image/common/back.gif
这是14年的新闻了。上海政务数据共享2.0版已经出炉。

之前各个掌握数据的部门还没有开放权限,这次是相关部门数据并入一个数据库。这里我当时有个疑问就是,谁有权限能看。当时并进去是真的。

时间我没看仔细抱歉了。

葡萄 发表于 2015-5-8 18:50:11

icysword 发表于 2015-5-8 17:55 static/image/common/back.gif
说得好。

个人认为现在论坛内讨论的“大数据"泛指大规模结构化与非结构化数据的采集、统计及其应用。所 ...

我也不是IT专业的,专业话题让专业人士讨论。我只提一下我知道的进展,和自己的一点体会。比如,这里有不少人质疑打数据现在已经做到的事情到底能干什么。我始终想阐述一个观点,就是这些事情的配套不是改变具体的一事一物,是改变我们社会组织的进化速度乃至与此相关的组织进化速度。比如,说到大数据交易中心,很多人看的重点在到底交易了什么而我看点是配套的立法程序,毕竟有关数据纳入固定资产的立法已经提到有关部门讨论,对应的是完成有关立法的时间表。这背后是一整套制度设计的改变。我自己工作和投资都开始围绕这个时间表的推导而来。同样,我主张的全量思维方式不仅体现在上面我的话里。也反应在有些网友这样的质疑中,大数据现在表现的方式更像是骗钱。我曾经经历过浦东开发,当时95年之前浦东开发除了倒卖地皮就是搞各种批文,比现在各网友质疑的更不堪。当时,就是这样一年一个样,三年大变样浦东三年乃至上海三年面貌为之一新。土共做事从来没有孤手的,且不管他做的成功与否,看看与此相关的配套,而不只是盯住某个变化,更容易对自己的思考做参考。

葡萄 发表于 2015-5-8 19:14:55

西溪老槐 发表于 2015-4-26 21:50 static/image/common/back.gif
葡萄:你好!

我涉足IT已经很长时间了,大致上与鲍岳桥是同技术代的人。数据库的协议这类协议在面向对 ...

http://www.sychaguan.com/forum.php?mod=viewthread&tid=12653&extra=page%3D1

这个链接里17楼我提到了与大数据交易中心产生关联性的一些内容,你参考下。我在这个板块提及股票讨论,你也曾经说过我把大数据当做一种工具,这里我可以说的更具体点,我是用阿里培训客户的大数据流程教材来重新梳理我选股方法的。

等而下之 发表于 2015-5-8 23:10:24

本帖最后由 等而下之 于 2015-5-8 23:11 编辑

2015中国电子商务峰会“干货”20条
一、规律篇
二、“互联网+”篇
三、“大数据+”篇
四、“电子商务+”篇
五、哲学篇
http://news.eastday.com/eastday/ ... u7ai3908519_K4.html

等而下之 发表于 2015-5-8 23:18:22

德国马普神经科学家放弃灵长类研究
一位一直是动物权益保护者攻击目标的德国神经科学家表示,他正放弃灵长类动物研究。马克斯·普朗克生物学控制研究所所长Nikos Logothetis说,他将“尽快”结束现有的猕猴试验,然后将研究转向啮齿动物的神经网络。

http://news.xinhuanet.com/science/2015-05/08/c_134215056.htm

far8008 发表于 2015-5-8 23:45:43

等而下之 发表于 2015-5-8 23:10 static/image/common/back.gif
2015中国电子商务峰会“干货”20条
一、规律篇
二、“互联网+”篇


太好了。都是干货

tnq 发表于 2015-5-9 09:52:03

icysword 发表于 2015-5-7 22:15 static/image/common/back.gif
插一句嘴,数据共享已经开始了。我党还是敢于革自己的命的。

http://shzw.eastday.com/shzw/G/2014051 ...

相应的是数据安全更重要,希望量子加密技术的突破!

西溪老槐 发表于 2015-5-9 18:32:29

icysword 发表于 2015-5-7 22:15 static/image/common/back.gif
插一句嘴,数据共享已经开始了。我党还是敢于革自己的命的。

http://shzw.eastday.com/shzw/G/2014051 ...

icysword:你好!

看了你的链接。这点进步是不错了。不过,离列宁斯大林的要求还相当远(想不到有斯大林的份吧),离马克思恩格斯的要求更远。应该属于改良,不是革命。如果成了资产阶级政党,那才是革命了。革了无产阶级政党的命。

这种真是属于信息共享。带有希望社会监督的意义。与大数据理论的共享有质的离别。比如,葡萄提到的信息资产化的共享。

你就一句,一个链接。我便用我以为是来聊。如有错误,请多多包涵。谢谢你的回复,谢谢!

万丛山 发表于 2015-5-9 21:48:49

西溪老槐 发表于 2015-5-9 18:32 static/image/common/back.gif
icysword:你好!

看了你的链接。这点进步是不错了。不过,离列宁斯大林的要求还相当远(想不到有斯大 ...

请教下:我党还是无产阶级政党吗?

看看前些年的人大、政协会,不像啊。

西溪老槐 发表于 2015-5-9 21:55:05

葡萄 发表于 2015-5-8 19:14 static/image/common/back.gif
http://www.sychaguan.com/forum.php?mod=viewthread&tid=12653&extra=page%3D1

这个链接里17楼我提到 ...

葡萄:你好!

首先,我得再次声明。我所有的帖子都是就事论事的。我说大数据目前的功能来看是技术性的,原因也说了,是计算能力的制约,无法实现高级人工智能。希望你不要理解错了。

我在讲股市的时候,讲到大数据的作用时,是指它放大信息不对称博弈的作用。在股市上利用信息不对称是庄家最常用的。

我和你都看到大数据对社会对人们的生活起到的作用,这是我和唱你的要求,展开大数据的讨论。可能是数据和经历不同罢。思考的范围和方向有一些不同。但是,这些不影响讨论的。讨论就是听不同的意见。

对了,讲到了阿里。我借你的层贴说明一下。因为我看到有人认为我是阿里云的。我与阿里这个企业一丁点关系也没有。也不是任何一家电商的。我对它们的IT技术能力和长短是“心中有数”的。我也与大数据本身不远。能聊一些相应的内容。网络虚拟,匿名,讨论最好看内容。网络上谁是谁不重要。

希望看到你的新收获。再次谢谢你,谢谢!

西溪老槐 发表于 2015-5-9 22:40:03

万丛山 发表于 2015-5-9 21:48 static/image/common/back.gif
请教下:我党还是无产阶级政党吗?

看看前些年的人大、政协会,不像啊。

万丛山:你好!

这个问题的政治色彩太重了。不知道会不会被墙了。人大,政协,不是党。不说。

从理论上,主要看党章。党章上看,还是无产阶级政党。在党建的实践上,自从资本家可以入党这个做法来看,修正的量就非常大了。

从朱棺材减员增效和改制的结果来看,我党失去了最强大的城市支持力量——产业工人。这大概是连他都没有想到的。

从分田到户来看,三农问题因为毛主席在世时建立水利设施寿命年限已到而更加突出,绝大多数农民并没有得到改革的红利。这个问题,可以找一下陈锡文的著作。

工农联盟非常脆弱。

现在,这三十年的摸石头过河也应该看清是什么河,河底下有什么了。追兵近了,得真正过河了。再过一些时间就看明白了。

最近家父的一位老战友与我聊天时说,光反腐没有用,割韭菜一样,割一荐,又长出一荐。要真正要解决的产生腐败的温床。不然,公共资源总有一天会在反腐败上消耗尽的。那就不是换旗,就是换人了。

我觉得他说的有道理,我党要保持无产阶级的本色,就得解决产生腐败的温床。那么,什么是温床呢?腐败与经济直接有关,只要把经济制度的变化时间与腐败程度变化的时间做一个表,就很容易得出结论的。

谢谢你的问题。谢谢!

注:这个层贴的政治色彩太重。如果要影响茶馆,就请当家的删了,或者通知我,做一个修改。

icysword 发表于 2015-5-9 22:57:46

西溪老槐 发表于 2015-5-9 18:32 static/image/common/back.gif
icysword:你好!

看了你的链接。这点进步是不错了。不过,离列宁斯大林的要求还相当远(想不到有斯大 ...

谢谢老槐!育儿版的老槐和这里的老槐,果然都可以让我学习到很多东西。

说革命是有点上纲上线了。但先有信息共享,然后慢慢再进化成其他的模式,也是循序渐进发展的客观规律嘛,不可能一步到位,能看见一点进步就应该高兴,因为以前十几年他们一直在倒退。就比如我看见国航慢慢在改善服务质量,从空姐的待人接物开始,从航食开始,虽然大家都还在骂,但我就为国航感到高兴。不怕落后就怕不想进步。

还是不在政治方面展开了吧。不是不感兴趣,而是我的知识结构没到这个层次。

我个人不是从事这方面工作,但是想转向这个领域,还需要论坛上老师们包括老槐的指导和引领。谢谢您。

万丛山 发表于 2015-5-9 23:11:08

西溪老槐 发表于 2015-5-9 22:40 static/image/common/back.gif
万丛山:你好!

这个问题的政治色彩太重了。不知道会不会被墙了。人大,政协,不是党。不说。


谢了。

看完了。意思领会了。解开了我心中的一些疑问。

您要是觉得敏感,请编辑。

等而下之 发表于 2015-5-10 01:15:43

本帖最后由 等而下之 于 2015-5-10 01:39 编辑

西溪老槐 发表于 2015-5-9 22:40 static/image/common/back.gif
万丛山:你好!

这个问题的政治色彩太重了。不知道会不会被墙了。人大,政协,不是党。不说。

老槐兄,对最近出炉的“做改革的促进派”,有什么看法,能聊一下吗?


西溪老槐 发表于 2015-5-10 15:03:13

等而下之 发表于 2015-5-8 23:10 static/image/common/back.gif
2015中国电子商务峰会“干货”20条
一、规律篇
二、“互联网+”篇


等而下之:你好!

链接网页上大数据还只是层次比较低的,也相对容易实现的。还没有达到能迅速影响人们生活的层面。其实,大数据影响人们生活层面的东西已经发生了,只是很难由官方来说,风险太大。对政府的行政管理而言,它们也只有摸着石头过河一条路。在大数据方面,我国并不落后,没有刚开放的时候,有东西方成功和失败的经验教训可借鉴。我和葡萄在讨论得热乎的重点不在链接所指的层面。

换一个角度,真正的大数据,是包含链接网所述的全部内容,还要加上其他……

谢谢你提供的链接。谢谢!

西溪老槐 发表于 2015-5-10 15:17:13

等而下之 发表于 2015-5-8 23:18 static/image/common/back.gif
德国马普神经科学家放弃灵长类研究
一位一直是动物权益保护者攻击目标的德国神经科学家表示,他正放弃灵长 ...

等而下之:你好!

链接中的德国神经科学家所遇到的难题也就是人工智能遇到的难题。他遇到的是社会因素造成的困境。

在这个领域,谁都想赢者通吃。今年初吧,美国一位高位截瘫的病人,通过非直接触媒方式,控制机器人喂了自己一口巧克力。前些天,我国一个正常人,也是通过非直接触媒方式,控制机器人前进后退。中美两国正斗得不可开交。

如果非直接触媒方式能解决接口问题,那么,模拟大脑功能的伦理道德障碍只剩下心理伤害这个块了。以现在的心理调整和修复技术来看,大脑功能模拟可以前进非常非常大的一步。

谢谢你的链接提供的信息。谢谢!

西溪老槐 发表于 2015-5-10 15:35:28

等而下之 发表于 2015-5-10 01:15 static/image/common/back.gif
老槐兄,对最近出炉的“做改革的促进派”,有什么看法,能聊一下吗?

等而下之:你好!

可以这样说,当下的中国,基本上没有人会反对改革。而是对什么样的改革有着不同的支持和反对。

改革,必然会涉及利益的调整。不同的人,利益不同就会有不同的态度。有些利益是反对关系的,支持和反对某类改革一定是态度鲜明的。

不讲改革的方向,只讲促进,那是要出问题的。如果把“当改革的促进派”当大棒,这样的人就要特别小心了。列宁说过,在市场那些叫卖声最大的人,往往是要把最坏的东西卖出去的人。在中国的国情下,对绝大多数人有利的事,只要法律行政放开,还需要叫卖吗?

像这样的口号,要等一等,看一看。虽然我对易中天的许多观点有看法,但是,他的一个方法论的观点我倒是很同意的。当时他是在讲“人有没有才”。他说,一个人有才就像十月怀胎,他不说,时间一长,别人也就看出来了。

谢谢你的回复和提问。谢谢!

等而下之 发表于 2015-5-10 15:38:59

本帖最后由 等而下之 于 2015-5-10 16:23 编辑

西溪老槐 发表于 2015-5-10 15:03 static/image/common/back.gif
等而下之:你好!

链接网页上大数据还只是层次比较低的,也相对容易实现的。还没有达到能迅速影响人们 ...
其实看了您与葡大等人的文章,参照一些时间节点,再结合自己身边所发生的事,我早就不想再努力了,早就想歇菜了。因为自己知道再怎么努力,也不可能跟上了。
      但现在还想挣扎一下,只是因为我已经当爹了。我必须要当一个正面的榜样啊,哪怕是样子也要做一下。
      

海因杰 发表于 2015-5-10 16:21:30

本帖最后由 海因杰 于 2015-5-10 16:22 编辑

等而下之 发表于 2015-5-10 15:38 static/image/common/back.gif
其实看了您与葡大等人的文章,参照一些时间节点,再结合自己身边所发生的事,我早就不想再努力了,早就想 ...
:L 努力了,至少比其他人跑得快哈。

西溪老槐 发表于 2015-5-10 18:12:30

等而下之 发表于 2015-5-10 15:38 static/image/common/back.gif
其实看了您与葡大等人的文章,参照一些时间节点,再结合自己身边所发生的事,我早就不想再努力了,早就想 ...

等而下之:你好!

你说的这个层贴似乎与人生有关。应该遇到一些难题了。言语中比较消极一些。一时性的,可以放一放,如果时常性的,还是直接面对比较好。这让自己的心理更健康。

心理健康的人永远面对现实,心理健康的人永远积极多于防卫。这是恩师送给我的。传给你。我们一起共勉吧。

等而下之 发表于 2015-5-10 18:26:41

西溪老槐 发表于 2015-5-10 18:12 static/image/common/back.gif
等而下之:你好!

你说的这个层贴似乎与人生有关。应该遇到一些难题了。言语中比较消极一些。一时性的 ...

老槐兄,我的问题又来了,可能要歪楼了,
       如何才能做到心理健康呢?

等而下之 发表于 2015-5-10 19:20:11

西溪老槐 发表于 2015-5-10 15:17 static/image/common/back.gif
等而下之:你好!

链接中的德国神经科学家所遇到的难题也就是人工智能遇到的难题。他遇到的是社会因素 ...

科技公司如何利用数据让用户习惯成瘾?

虎嗅注:做为一个普通用户,我们之前可能没听说过,但是诱导技术 (Persuasive technology) 在我们周围到处都是,而且这些科技正在变得更加智能。它们是如何起作用的?原理如何?

http://news.cnfol.com/it/20150510/20722434.shtml

竹林风骨 发表于 2015-5-10 19:57:11

等而下之 发表于 2015-5-10 18:26
老槐兄,我的问题又来了,可能要歪楼了,
       如何才能做到心理健康呢?

少有人走的路。传习录。

等而下之 发表于 2015-5-13 13:27:35

西溪老槐 发表于 2015-5-10 15:03 static/image/common/back.gif
等而下之:你好!

链接网页上大数据还只是层次比较低的,也相对容易实现的。还没有达到能迅速影响人们 ...

大数据+:全产业链条的颠覆与重构

……
    现在已经进入到“云物移大智”时代。“云”是云计算,“物”是物联网,“移”是移动互联,“大”是大数据,“智”是智慧城市或智慧地球。“云物移大智“时代是颠覆一切的时代,“颠覆一切”成为这个时代的主旋律。这不仅仅是一个产业转型的问题,更是整个人类社会的一次重大的转型升级。
……

可以说,互联网重构之后,我们将迎来继人口红利后的下一个红利——大数据红利,引领世界互联网升级潮流。一个全新的“大数据+”也并驾而至,全产业链条的颠覆与重构拉开了时代大幕。

http://news.xinhuanet.com/info/2015-05/13/c_134234232.htm

等而下之 发表于 2015-5-14 20:24:33

等而下之 发表于 2015-5-8 23:10 static/image/common/back.gif
2015中国电子商务峰会“干货”20条
一、规律篇
二、“互联网+”篇


电子商务法草案有望年底成型:正征求各界意见

 据介绍,正在起草中的《电子商务法》(草案)涉及电子商务监管体系、电子商务市场准入与退出、数据电文和电子合同、电子支付、知识产权保护、消费者权益保护、争端解决机制、网络安全和跨境电商等内容。一旦草案完成,将征求各部门、地方、电商企业、协会、专家等意见,在2016年6月前,提交全国人大财经委全体会议讨论。

http://news.xinhuanet.com/fortune/2015-05/14/c_127799459.htm

葡萄 发表于 2015-5-15 13:05:23

http://www.acfun.tv/v/ac1894162

有些国内也做到了比如在市中心通过语音采集进行识别与人工识别罪犯。后一个试验点,就在我家附近。年初信息协会年会上,相关企业还做过报告。

衣香楚楚 发表于 2015-5-15 15:13:13

""继“神奇工场”之后,有联想内部人士向界面新闻记者透露,联想的智能电视业务很快将从庞大的联想体系中独立出去,采取风险投资的方式,以全新的品牌和独立公司的形式来运营。

  和“神奇工场”诞生的逻辑类似,联想希望通过将这些业务部门独立于庞大体系之外的方式,获得更多风投资本的青睐,同时激励内部创新。

  为了让这些业务能够真正实现互联网化,摆脱传统硬件的思维模式,联想也不排斥与阿里巴巴这样的公司合作。据界面新闻记者从接近此次交易人士得知,新公司很可能由联想和阿里巴巴合资注册,同时引入其他风险资本,并将于5月20日左右推出新的电视品牌“17”。阿里巴巴将为该电视产品提供Yun OS系统以及天猫销售渠道资源。

  “你可以把这件事和华为荣耀类比。”该人士说道,他认为联想这么做是希望能够以更轻巧的方式来实现业务转型,同时保留老牌硬件厂商的供应链优势。

  他进一步解释,联想在制造和供应链上有几十年的经验了,并且在线下有非常完善的销售渠道,这都是目前互联网企业做硬件所缺乏的。但传统的硬件思路又让联想、华为这类厂商在品牌包装、推广、线上销售等各方面不如互联网创业公司灵活,“与其如此,不如直接让这些部门以创业公司的形式生存下来。”

  今年2月份开始,市面上就流传着联想智能业务部门经营不善面临撤销的消息。据界面新闻记者了解,该部门并不是完全撤销,而是将原有的电视销售团队并入PC业务,而电视产品团队则加入新成立的电视公司继续研发“17”电视。

  “和华为推出荣耀品牌策略相似,未来新公司研发的‘17’电视将主打线上销售,该公司也继续负责联想电视,而联想电视更专注于线下市场。”该人士透露。

  让更多创新业务独立出来,最大限度地保留固有优势,也最大限度地引入更专业的团队和更多风险资本,这或许是联想在今年做的最重大的决定之一。

  在4月刚刚从联想内部独立出来主打智能手机、智能家居的“神奇工场”中,联想集团占70%,创业团队占15%,集团管理层投资占15%,之后集团可以稀释20%的股份给到其他战略投资。相比之下,智能电视业务“17”中,外部资本所占的比率可能更大,“联想和阿里巴巴的持股比例可能相差不大。”一位接近此次交易的人士表示。""

手握数据的/客户需求的互联网公司 和 现在过剩的制造/实体生产厂家结合. 或许可以做到需求和生产的有效配置. 缺了那块相对还是较难. 或许”+互联网“ 已经进行了一段时间.

等而下之 发表于 2015-5-18 23:32:04

“类脑”研究为何热度猛增

 清华大学“类脑计算研究中心”近日举行了揭牌仪式。信息、生物、材料、物理、微电子等7个院系的掌门人共同按动启动钮,多学科共同支持类脑研究。清华大学新任校长邱勇到场致辞。他表示,希望类脑计算推动跨学科的研究发展。
……
有关“类脑”研究,国内高校和科研院所蓄势待发。
  早在2012年,复旦大学就牵头联合浙江大学、华中科技大学等十几所高校及中科院研究所,成立了“脑科学协同创新中心”,推进脑科学研究和转化应用。



http://news.xinhuanet.com/science/2015-05/17/c_134240720.htm
页: 1 2 3 [4] 5 6 7 8 9
查看完整版本: 大数据(二)