国家有一个编码中心，http://www.ancc.org.cn/，只是没有向外提供接口，曾经还想调用它的接口获取商品信息。
明月无心 发表于 2013-11-30 10:34 static/image/common/back.gif
这个不是问题。现在Google对PB级（1PB=1000TB, 1TB=1000GB）数据查询可以做到秒级响应。为什么大数据现在 ...
呵呵，RTB在中国推进还是比较慢的
葡萄 发表于 2013-11-28 22:18 static/image/common/back.gif
我其实最后想说的是，如果说使用计算机的人和不使用计算机的人构成不同的生产生活方式的话，那么使用网络 ...
葡萄兄提到网络对生活的改变，我本能与我们项目部使用的对讲机形成了关联。未使用对讲机的时候，项目部的管理比较松散，人也相对比较自由。自从人手一部对讲机以后（设置在同一频道），一个指令下达，所有人都同步动起来了。久而久之，大家形成了以对讲机为中心的习惯。等待指令，时刻保持战备状态。工作效率是提升了，但是大家都成了机器人。
葡萄 发表于 2013-11-30 20:35 static/image/common/back.gif
我给你补充我刚才和朋友讨论的同步的内容。
比如刚才的争论就涉及这样一个话题
呵呵，对大数据，最高兴的莫过于政府。但黑客帝国是否会出现在这个星球，目前还是未知数。
而有能力搞大数据的国家，就那么几个。欧洲不统一的话，很怀疑是否能搞的起来？
谷歌，亚马逊，FB是可怕可敬的公司。
大多数人注定会被淘汰，毕竟大家都知道了，谁当干电池。。。？机器人？那不会出现终结者嘛。。。。
Amazon的新物流计划Prime Air，真是快啊：
http://www.amazon.com/b?ref_=tsm_1_yt_s_amzn_mx3eqp&node=8037720011
明月无心 发表于 2013-12-1 18:03 static/image/common/back.gif
几点细节补充：1）美国国安局合同的主要竞标者是亚马逊和IBM，IBM输得很惨，几乎在所有的指标上都输了。这 ...
1）亚马逊本来就是靠大数据起家的，所以在这方面极为重视，这也是亚马逊亏损但不妨碍其股票一路上扬的核心原因。IBM已经是过时角色鸟。
2）三中全会说的最严格的食品和药品监督制度，底气原来在这里呢。
葡萄 发表于 2013-11-30 21:57 static/image/common/back.gif
未来或可通过化学物删除、修改人类记忆
我更关注大数据处理能力的飞跃
就我所知，大数据似乎在80年代就提过，一本当时很火的书叫第三次浪潮
不过我记得当时作者得出的结论是未来世界由欧洲联盟主导。。。这个。。。
大数据处理能力进入秒级，意味着人类个体之间信息沟通的障碍在逐渐消除。甚至语言障碍也即将消除。假以时日，学门外语，锻炼大脑会是最大的目的。
个体之间信息交流的畅通，意味着个体之间、群体之间利益诉求和博弈的效率大大提高，意味着真正意义上的民主社会在技术上有了可能性。我记得刘慈欣在超新星纪元里对这个有过描述，只不过当时只是很简略的归结为超级电脑四个字。
反过来，大数据的信息意味着可以更直接有效的传递信息给个体，进而影响个体的行为和诉求。如果我是上位者那个圈圈里，我会对此加倍留意。谁掌握数据，谁掌握数据的处理，谁就是最有权利的人。基于一般的常识，普通的人们甚至在有所察觉之前就会被网入瓮中。。。这一幕如何避免？将文革的精神刻入普罗大众的文化意识基因里么？
漫无边际的瞎想，生物本能无非就是3个步骤，1，接受信息，2，接收后两种选择，有害，逃避或抵抗，有益，顺应或应用。3，选择后分析路径方法，选择最有利的途径，如果没有途径就将现有途径拆分组合试错。
所谓的自主意识，全是从上面3步中不断复杂叠加而来。而这三部貌似技术上在电脑上编程实现并无难度。在巨量信息和超强处理的叠加作用下，这个储存和处理信息的后台最后会不会变成终结者天网？
谢谢葡萄的无私
花差花差农民 发表于 2013-12-2 11:51 static/image/common/back.gif
1）亚马逊本来就是靠大数据起家的，所以在这方面极为重视，这也是亚马逊亏损但不妨碍其股票一路上扬的核心 ...
忘了说一句，药盒上多数是柯达印刷的。柯达刚走出破产保护，现在印刷业务是柯达的主业之一，高速打印条码是他家的绝活。
花差花差农民 发表于 2013-12-2 11:28 static/image/common/back.gif
呵呵，对大数据，最高兴的莫过于政府。但黑客帝国是否会出现在这个星球，目前还是未知数。
而有能力搞 ...
是啊，所以我对斯诺登非常佩服，是真正的理想主义者。
明月无心 发表于 2013-12-2 13:31 static/image/common/back.gif
是啊，所以我对斯诺登非常佩服，是真正的理想主义者。
斯诺登是不是可以理解成系统中的异数或病毒？！
如果全球真的一体化了---利益集团彻底结盟或者融合，异数将在那使用他的力量？
刚刚花了几个小时把《大数据时代（精华版）》看了一下。里面说到数据很可能在未来会成为公司的一项资产；在大数据时代，拥有数据及如何处理数据的公司会有很大发展。就其特征而言，相关性在里面占了很大篇幅，通过这个可以做预测，知道“是什么”，而不必胶着于因果关系，“为什么”。但大数据也会威胁到隐私保护，匿名化及单纯隐藏不再适用；一定程度上，会动摇了人们的理性思维及自由选择。因此，作为独立的个人，作者又提出了“在一个预测的时代里，人类的自由意志神圣而不可侵犯，这一点不可轻视。”“我们不仅需要承认个人进行道德选择的能力，还要强调个人应为自我行为承担责任。”
花差花差农民 发表于 2013-11-28 15:42 static/image/common/back.gif
知道因果的数据没啥意义，通过分析数据的关联来找到因果才有意义。很多因果以前是想不到的涅，呵呵。
可能更重要的是,以前是"一定要想明白因果逻辑才会去做"的模式,会被"有关联就行"的模式给推翻.我感觉这个是革命性的推翻,是和以前知识甚至常识不大一样的.
海因杰 发表于 2013-12-2 14:54 static/image/common/back.gif
刚刚花了几个小时把《大数据时代（精华版）》看了一下。里面说到数据很可能在未来会成为公司的一项资产；在 ...
关于大数据，我不是很熟悉，所以不敢贸然发问，我只是针对网络对人生活带来的变化引起的关联。其实我是想针对葡萄兄关于比特币的只言片语说点个人的想法，只是感觉想法尚不成熟，所以引而未发，或许这部分与大数据比较贴近一些。我的知识面有限，所以对于知识范畴以外的部分，有时只好保持沉默，而且限于表达能力有限，心中万言往往不知从何说起，呵呵，没办法，不怕你笑话，因为是引产的，五岁才开始会说会，表达能力有限，往往心中所想无法随心所欲的表达，非常的苦恼，呵呵。
老土拨鼠 发表于 2013-12-2 17:14 static/image/common/back.gif
可能更重要的是,以前是"一定要想明白因果逻辑才会去做"的模式,会被"有关联就行"的模式给推翻.我感觉这个是 ...
没错，这是个新范式
tdyxssrs 发表于 2013-12-2 14:40 static/image/common/back.gif
斯诺登是不是可以理解成系统中的异数或病毒？！
如果全球真的一体化了---利益集团彻底结盟或者融合，异数 ...
呵呵，斯诺登就是咱们这个时代咱们这个世界的Neo，《黑客帝国》预言了一切。
本帖最后由 tdyxssrs 于 2013-12-2 23:02 编辑
明月无心 发表于 2013-12-2 22:03 static/image/common/back.gif
呵呵，斯诺登就是咱们这个时代咱们这个世界的Neo，《黑客帝国》预言了一切。
问题就以后怕NEO出来了也没有地方收！
生化危机，一个主角，同样的开始逃离的场景，背景就是一大堆的变异了的人和到处都废墟，目标就是拯救还没被格式化，少的可怜的人类种子，背后的控制力量一直都没显示过，拍了好几部了。不就是在测试，变化的可能吗？
{:4_268:}
明月无心 发表于 2013-12-2 22:03 static/image/common/back.gif
呵呵，斯诺登就是咱们这个时代咱们这个世界的Neo，《黑客帝国》预言了一切。
资本主义与大数据信息时代殊途同归？斯不能算neo吧？
本帖最后由 zoff 于 2013-12-3 11:48 编辑
明月无心 发表于 2013-12-1 18:03 static/image/common/back.gif
几点细节补充：1）美国国安局合同的主要竞标者是亚马逊和IBM，IBM输得很惨，几乎在所有的指标上都输了。这 ...
也多几句嘴，给您这个细节做个狗尾续貂。
葡萄所提及的大数据量级下的条码相关应用模式碰巧本人几年前曾经接触过数次，其中一次就是这个药品条码。遗憾的是当时对大数据这个概念还不能真正的理解其价值，不然也许当时做出的判断就会更加坚定——而也许有些事情就这么错过了。
“一物一码”与“一类一码”最大的区别不仅仅是数量级的提升（就举二锅头为例，一类的二锅头的一维码都是一样的，但一年的出货量可能上了百万千万瓶，也就是“一瓶一码”的模式下数量级提升了千万倍），更重要的是“一物一码”的模型下将此“一物”也就是这一瓶二锅头的全生命周期数据都实现了收集和管理（如果没有这个“一码”，也就不存在某一条数据了）。
您提及的药监管理，其实只是一个小领域——或者说不得已缩水之后的领域。在最开始的时候，这个条码管理是针对于更加广阔的领域的，只不过遇到了各种问题之后，缩到了药监领域并且得到了切实的落地，当然这已经是功德无量的一件事情了。至于给您开发出来的这个借口，在下认为技术原因的可能性并不是那么的大。
稍等，我将当时更多的资料发来，供您一乐。
zoff 发表于 2013-12-3 11:46 static/image/common/back.gif
也多几句嘴，给您这个细节做个狗尾续貂。
葡萄所提及的大数据量级下的条码相关应用模式碰巧本人几年前曾 ...
说起来是奥运年的事情啦。先秀个当年的“分析结果”给你当个靶子：
……以现有的实际情况，xxxx添加流通核销和消费查验信息尚难以实现。但流通环节、渠道管理以及最终销售信息，是xxx最大的数据资源，也是xxx实现增值的必然和唯一选择。因此，如何实现流通渠道的信息采集，达成良好的商业模式，是与xxx商业运营开展关系最大的部分……
……对xxx的取码、喷码、发码直至激活，对于中小企业来说都是一个发展前途优异的傻瓜化解决方案。结合印刷、流水线等相关硬件资源，配合xxxx的推荐，即使是xx公司也能从中掘金……
……xx流动所经历的渠道和各级销售网点，是任何厂商都着力研究的重点。在这个方面上如果能够获取足够的数据样本，则经济利益是惊人的。现阶段，xxx并没有足够的能力将渠道的数据整理收集起来，但从长远来看，令xxx、xxx强制性上传xx码及相关信息也不是完全不可能。在这种形势下，xx码从厂家发出，渠道获取后整理并上传，再交给零售商添加新的信息上传，又是巨大的市场。终端的数据上传可能超出软件的控制范围，但入库出库的信息传递，无论是……，都有巨大的市场空间。
好了，感谢您忍住没吐出来看完了不知所云的这一段。实际上这正是当初某大佬搞得一个项目：针对于x类型消费商品实现一物一码，从而实现有效监管。当时我参观的时候，在模拟货架上看到的正是二锅头，一瓶瓶二锅头身上除了那个大家都熟悉的一维条码之外，还有个奇怪的标志码，我拿起来仔细对比，发现两瓶二锅头这个标志码从第x位之后完全不是连续的（你应该知道我在说什么），然后我还看见了种子什么的。按照当时的预估，每年的数据量达到万亿级别。要注意的是这个万亿是指的主键数量，您做这行应该了解如果把所有的流通环节信息和查询信息放进来做关联，那要乘以多少。当时我还不知道大数据这个词，但当时的解决方案确实也不是用的现在常见的大数据解决方案——但在模拟环境下可用，这就足够了，因为它一直没有走出模拟环境进入现实，这个项目在舆论圈激起了超出想象的反应，从垄断到什么阴谋论到什么玩意儿不一而足，而这个项目也搁浅了（当时有个段子讲这个事情，说国务院的人都不知道这个项目要干啥——当然这是戏言了）。后来出现了药品监管，说来也搞笑，两年后我竟然又和这个事儿扯上了关系，跟一个玩这个东西的人去另一个领域推类似的解决方案，我拿出来的自然又是这个万亿条的玩意儿，要将那个领域的商品从“一x一码”变成“一x一码”（原谅我用了这个因为如果说出来单位的话一眼就知道是什么领域了），当时我只是意识到数据的价值很大，但没有懂得数据有那么大的价值，现在想来如果我能够理解今天这个帖子里面说的一些东西，当时我也许就可以说服身边的人，他们也许就会用另一种方式来推动这个方案，当然没准在下从中就可以赚到辛苦钱钱捞一票。
乱说了些，见谅。
好高端的讨论啊 这是黑客帝国的节奏吗
本帖最后由 海因杰 于 2013-12-3 17:06 编辑
健恒 发表于 2013-12-1 18:10 static/image/common/back.gif
国家有一个编码中心，http://www.ancc.org.cn/，只是没有向外提供接口，曾经还想调用它的接口获取商品信息。 ...
我点开你提供的链接看了一下，条码信息查询中条码追溯是不是大数据技术的运用？另外我想问一问，二维码、微博什么的一直在推（貌似中央电视台喜欢提微博评论什么，一方面体现民意互动，另一方面也有引导鼓励网民使用微博的吧），是不是也是为大数据积累数据？
pilgrim 发表于 2013-12-3 16:49 static/image/common/back.gif
好高端的讨论啊 这是黑客帝国的节奏吗
个人感觉：现在已是黑客帝国的时代。试想离开网络会如何？
本帖最后由 健恒 于 2013-12-3 18:22 编辑
海因杰 发表于 2013-12-3 16:57 static/image/common/back.gif
我点开你提供的链接看了一下，条码信息查询中条码追溯是不是大数据技术的运用？另外我想问一问，二维码、 ...
条码追溯主要还是物品溯源，比如肉菜、食品的溯源，主要想解决食品安全、监管问题。当然如果真要每个东西给一个唯一码，那这个数据量将十分巨大，也是大数据应用之一。食品溯源可能还需要各个环节配合，比如物流、渠道、零售环节，通过这个码就可以查到从生产、流通、零售的全过程。
有时候普通人因为信息的来源有限，所以无法看清事物的真面。更因为，众多权威的言论观点有时候截然相反，所以，普通民众没有能力去判断孰对孰错。很多时候，不是因为不信，而是信错了。
明月无心 发表于 2013-12-1 18:03
几点细节补充：1）美国国安局合同的主要竞标者是亚马逊和IBM，IBM输得很惨，几乎在所有的指标上都输了。这 ...
有个疑问，7位产品码是数字组成？若是，7位数可区分一千万的数量。但某些单品产量在一段时间内产量会超过一千万怎样解决？
哎，这篇就难等了
顺便人工置顶
葡萄 发表于 2013-11-30 21:57 static/image/common/back.gif
未来或可通过化学物删除、修改人类记忆
http://tech.sina.com.cn/d/2013-12-04/11358974876.shtml
正好看到这个新闻。脑科学的研究，特别是因为毒品问题推动的各种生理机制的研究或许早晚会找到人类情感的物质基础。
人类的思维中，情感在生存竞争中起到的作用是什么呢？
首先非常感谢葡萄的分享，忙总和葡萄的文字总能给我很多营养
作为一个CS专业的学生，来从技术和科幻的角度歪歪楼
Big Data的概念与思想实际上并不是这几年才有的。数十年来CS研究者一直渴望着对海量数据的处理、挖掘能力。而更让无数CS研究者、思想家、科幻爱好者着迷的梦想，是人工智能。而这个梦想随着硬件本身性能的增长，分布式计算架构（如MapReduce, Hadoop之类），以及Machine Learning领域的不断进步（从SVM到现在的热点Deep Learning），已经不是那么遥不可及。
葡萄提到阿里云的计算能力，BAT三巨头在国内是在大数据计算架构和机器学习（主要是Recommendation System，Image Search）上走的最远的，虽然远不能和Amazon, Google这样的巨头相提并论。无论国外还是国内，对分布式架构的研究都是工业界引领的，如Google的MapReduce和BigTable，这个动力来自于业务规模的爆炸性增长。
人类技术的发展，不是线性的，而是爆炸性的。谁也无法预测三十年后，科技会发展到如何的地步。而科技的发展，也导致着生产力和生产关系的巨大变化。例如《黑客帝国》，就是对未来人类文明的宏观展望。
在我的理念中，人类未来的一个重要问题，是我们的文明形态，甚至生命形态是怎样的。打个不完全切合的比方，人类文明是否有可能演变成《StarCraft》中Zerg，或Protoss的文明形态？
探讨这类问题，借助已有的影视作品是比较方便的。以或许是世界上最著名的动漫——EVA为例。在EVA中，我们看到了目前无法理解的科技，如初号机、使徒，表面上是无坚不摧的变形金刚式的机器人，但实质上是和人类同源的巨型生命体。它们装载了S2机关，从狄拉克之海中获取无穷无尽的能量。如果借用犹太教的说法，使徒获得了生命之果，而人类获得了智慧之果。
而人类获得智慧之果的代价，类似于圣经中巴比伦塔的记载一样，就是人类从此失去了心灵上的联系。人类之间沟通的障碍，思想上的相互猜疑，也就是EVA中的能扭曲空间的AT Field。EVA的最后，掌控着人类命运的组织SEELE的最终目标，就是让人类的心灵和肉体完全融合在一起，形成一颗生命之树，也就是“人类补完计划”。人类在思维和肉体上得到了补完，代价则是失去了个体自由意志，人类作为一个整体到达了下一阶段的生命形态。在EVA的框架下，修改人类记忆，人与人思想上的直接交流，都不是不可能。而当人类被补完后，这些目标也就失去了意义。
除了EVA，StarCraft的背景也同样宏大。其中的Zerg和Protoss都是Xel'Naga 创造出来的生命。其中，Zerg是纯粹的肉体至上的种族，它们不断吞噬着别的生命，在自然界的恶劣环境中不断进化，获得了在星际飞行的能力。值得注意的是，无论种群的规模在星系中如何扩张，它们始终只有一个自由意志，就是Overmind。也就是说，整个Zerg种群实际上只有一个生物，就是Overmind。
或许有茶友看过江南的《上海堡垒》？里面的Delta文明实际上就是以Zerg为蓝本。里面有个描述是很有意思的，形象地展示了这类生命形态的强大之处。Delta文明向地球上投放的捕食者（实际上相当于母体分裂出的微不足道的一块组织），为了获取人类计算机中存储的Alpha文明遗留下来的技术，迅速进化出了利用触手读取硬盘的能力。
这类文明的恐怖之处，在于意志上的绝对的服从，和肉体上的不断进化。实际上，我觉得人类文明和这类文明有许多共同点。人类虽然每个个体看似有着独立的意志，但群体又是无意识的，会被洗脑，会被宗教、信仰等诸多工具控制。从人类这个种群上看，我们不过只有几种意志罢了。而个体的创造力，又保证了人类文明可能的进化，类似于Zerg个体的进化能力。只是，我们的这种文明形态，与Zerg相比还是太初级了，效率过低，微观上意志传达不够有效率，进化能力也偏弱。（当然与蚁群相比，我们是迈出了一大步）
一开始，我是想把机械文明和Zerg，人类这种有机文明分成两类。但转念一想，它们可能殊途同归。机械文明的终点，不会是《黑客帝国》或《变形金刚》中描述的场景，很可能是进化成硅基生命，类似于《孢子》游戏中的Grox文明，它们从物质上同化一切不属于自己的存在，不断扩张。有意思的是，《变形金刚》的动画续集《Beast War》中，变形金刚也最终与有机生命体融合，开启了新的纪元。
或许，应该把生命形态分成物质形态生命和能量形态的生命，就像Zerg和Protoss？不过这个就太玄乎了~~
随便写写，希望和大家一起讨论。
之前问过3D打印能否解决质量管理问题，因为质量控制做不好分散生产就是沙地上的高楼。现在看来大数据并不能把生产结构抹平啊，有可能抹平的是管理结构。不过当年电子政务推不动也不是技术障碍造成的吧。
拉开说个题外话，牛顿三定律的伟大，我认为就是找出容易测量和操作的，对足够多现象产生影响的物理变量，有了这些基本描述概念，物理学家才能分工合作建立理论体系并指导技术进步。当然单个变量是有局限的，力的单位本身不能直接描述电磁强度，各种量纲组合，才能描述现实世界。
现在，大数据技术本身只是提供了新时代的媒体技术，但是只有找到合适的变量定义，有意义的描述方法，这个媒体才能连接思维和物质世界。
现在我们能给每一个出产商品提供GUID，那么假如能解决录入和追踪，那么可能做到对整个社会经济运行建模，观察足够模型在发现基本规律之后，才能找出有意义的变量，然后尝试针对性调整。
rafanadal 发表于 2013-12-4 12:24 static/image/common/back.gif
http://tech.sina.com.cn/d/2013-12-04/11358974876.shtml
正好看到这个新闻。脑科学的研究，特别是因 ...
情感的进化作用已有很多研究了。有兴趣的话可以读读Emotion Machine.中文资料很少。