大數據

公开课视频回放 案例背景 随着计算机的应用普及，目前大多数企业的物资管理数据资料已开始采用计算机数据系统管理，但数据还是采用先纸张记录、再手工输入计算机的方式进行采集和统计整理。这不仅造成大量的人力资源浪费，而且由于人为的因素，数据录入速度慢、准确率低。随着企业规模的不断发展，仓库管理的物资种类机数量在不断增加、出入库频率剧增，物资管理作业也已十分复杂和多样化，传统的人工仓库作业模式和数据采集方式已难以满足仓库管理的快速、准确要求，严重影响了企业的运行工作效率，成为制约企业发展的一大障碍。 优势 零代码，搭建快，降低时间成本 维护方便，降低人力成本和经济成本 完善的数据管理以及数据展示功能 操作步骤 物资录入 1.参照附录1“需求及建模”的要求，搭建“物资录入”页面。 2.自动获取当前登陆人以及自动获取当前日期的公式，参照附录2。 3.设置入库数量的校验条件。 4.设置物资录入提交时的业务关联规则，参照附录3。 物资库存表 1.参照附录1“需求及建模”的要求，搭建“物资库存表”页面。 物资领用 1.参照附录1“需求及建模”的要求，搭建“物资领用”页面。 2.自动获取当前登陆人以及自动获取当前日期的公式，参照附录2。 3.设置“物资类别”和“选择物资”的选项来源。 4.设置“当前库存”的默认值，为数据联动。 […]

DataV的开发者们，今天进入你的用户中心，就会发现有一个小惊喜默默的在等待着你。那就是——私有部署功能上线啦！ 一直以来私有部署都是一些有需要的小伙伴所望尘莫及的，毕竟高贵的身份摆在那里，现在不用再看着它，看着它，目不转睛了，直接拥有它吧！ 我们DataV产品开发小哥哥的后背上应该会少很多炙热的目光。 当然，肯定还有一些亲故不知道这个功能吧！那什么是私有部署呢？ 私有部署是指将DataV开发的页面整个打包下载安装部署到企业内网中运行，举个例子，比如说企业内网中有一个数据库，只能在企业内网中访问，公网是无法访问的，那么线上的页面就不能连接内网的数据库，这种情况下私有部署就能很好的解决这个问题。 新功能当然要介绍一下使用方法啦 第一步：获取运行环境包 绑定运行包和账号，只能部署运行此账号下载的大屏。 第二步：部署服务 传输下载好的运行包到准备好的服务器上 新建⼀个目录，如 mkdir datav 解压运行包到DataV目录tar xzvf runtime.tgz ./datav/ 应用配置项文件 启动/重新启动/停止/应用检查 第三步：使用访问

　　近日，湖北宜昌市得心实用气体有限公司总经理朱延忠通过网上金融服务大厅“企贷通”平台申请200万元续贷，当日下午湖北银行客户经理方超“接单”。随后，朱延忠成功提款。如此便捷高效令朱延忠感叹，这在以前想都不敢想。如今，湖北宜昌探索建设网上金融服务大厅，用政务数据为企业“画像”增信，让银行实时对接放贷，畅通银企对接渠道，创新金融服务实体经济新模式。小微企业面临的融资难、融资贵等问题得到缓解。 　　小微企业融资难、融资贵，一方面难在小微企业“抵押难”，缺乏足够抵押物、质押物，难以通过传统金融产品获得融资;另一方面难在银行“获客难”，难以从数量庞杂的小微企业中识别诚实守信、踏实做事的企业。对此，宜昌网上金融服务大厅探索出了相应的解决办法。 　　针对“抵押难”，宜昌通过内外部数据的挖掘与整合，围绕涉企信息化关键点发力，打通大数据“肠梗阻”，不仅率先实现工商、人社、民政、公安等32家单位、60余亿条数据归集，更突破性地将电力、税务相关信息接入网上金融服务大厅平台。“利用平台强大的政务数据整合能力，形成包含工商、股权、行政处罚、司法诉讼等信息的企业信用报告，帮助银行精准分析小微企业生产经营和信用状况，降低了对抵押担保的依赖，让银行敢贷款、能贷款、收得回。”宜昌市金融办相关负责人介绍。 　　针对银行“获客难”，宜昌设置融资申请平台，企业在线申请，填写需求信息，银行实时接单，根据企业需求推荐相关融资产品。“在后台可以明确看到客户需求，改变了银行过去上门拜访、打电话等传统获客方式，提高了工作效率和成功率。”建行三峡分行副行长刘晖说，平台有效解决了银企双方信息不对称的问题。 　　小微企业之所以融资贵，主要是因为银行服务成本高、风险大。而线上快贷模式，省去了许多人工环节，不仅降低了经营成本，也通过智能风控降低了风险，大幅减少了坏账损失。同时，基于平台强大的数据整合，对企业的评价方式由人为判断转变为基于数据分析的科学判断，客观性和科学性大大增强。建行湖北分行介绍，该行“小微快贷”不良率一直稳定在较低水平，目前不良率0.62%，远低于各类贷款的平均水平。如此一来，在降低成本、控制风险的基础上，小微企业融资贵也明显缓解。 　　大数据带来的安全感，不仅让银行受益。“有大数据作为支撑，这让我们比过去敢担保了。”宜昌市中小企业担保投资有限公司总经理周菊芝说，过去担保公司只能通过征信报告和固定资产评判贷款人的偿还能力，如今通过网上金融服务大厅的各项大数据，可以精准分析判断对方的实际能力，降低了担保公司的风险。 　　宜昌奈克斯汽车商贸有限公司负责人刘文龙做二手车生意，因现金收车，资金压力大。近期他和公司另两名合伙人通过网上金融服务大厅申报了45万元创业担保贷款，从提交申请到银行完成授信仅用了1天时间。按程序完成公示后，刘文龙1周内拿到了贷款。“线下办理需要45天到60天，这么快就融到资，极大地缓解了我们资金周转的压力。” 　　此外，宜昌网上金融服务大厅还在探索实施线上抵押、线上公证等业务，进一步降低企业融资成本，帮助银行减少风险，降低不良贷款率。 　　自今年2月上线试运行以来，宜昌网上金融服务大厅已有19家金融机构的26项金融产品实现静态展示，9家银行和1家担保公司的7个信贷产品、1个担保产品实现线上直连直通办理。截至10月14日，通过网上金融服务大厅有效申请融资贷款的达到1.56万人(户)次、授信3655人(户)、4.28亿元，放款2171人(户)、2.46亿元。 转自创头条，原文链接：http://www.ctoutiao.com/2524886.html

在小程序开发的大环境下，我们可以在各种平台上开发小程序。由于平台兼容性、使用的功能API不一致等问题，我们怎样避免再次重复开发，在不同的平台开发相同的小程序呢？这时便衍生出了很多小程序转换工具，这里给大家介绍几个好用的转换工具插件，满满的干货，还不赶紧一睹为快！ 一、vscode 插件：wx2my wx2my 是一款在 vscode 上使用的插件工具。它可以非常快速地将微信小程序转换成支付宝小程序。但是需要注意的是，转换之后的支付宝小程序不能直接运行，还需要手动修改无法转换的部分。该插件已有3233次下载量。 wx2my 转换工具可以帮助开发者找到需要手动修改的代码部分，输出 todo.html 文件，并在转换后的小程序代码里添加了注释内容，使开发者更容易找到需要进行修改的部分。 转换能力 .json: JSON文件转换 .js: 脚本文件转换  样式文件.wxss 转 .acss  模板文件.wxml

阿里云与36氪发布了中小企业加速平台，帮助中小企业解决融资难、营销难、技术难等企业发展问题。https://yida.alibaba-inc.com/o/start-up-accelerator点击链接填写表单信息，即可获取阿里云创业支持 五年前，畅捷通还是一家传统软件公司，主要为小微企业提供传统软件包式财务应用。面对快速增长的SaaS市场，移动线上流量激增企业服务公司纷纷转型，畅捷通也开始寻求转型，探索如何应用SaaS产品服务好小微企业，过程艰苦卓绝。五年后的今天，谁也想不到，SaaS化的转型给畅捷通带来了数万计小微企业的信任。 SaaS化转型难 不转型死 在中国，注册企业数量已经超过一个亿，平均以每天六万八的增速在持续增长，其中中小企业发展态势迅猛，为中国经济贡献了60%的GDP。随着中国企业数字化经济发展备受重视，中小企业的业务需求激增，SaaS市场已企业服务公司成为必争之地。而中小企业又具备赛道多元和发展垂直化的特性，大部分需求较为分散，导致企业服务公司实现SaaS服务标准化难度高，中小企业需求并没有得到满足。所以，今天是企业成长最好的时代，也是最坏的时代。 在实施SaaS化转型时，有个问题一直困扰着畅捷通。SaaS化转型对企业的IaaS底层能力要求十分严格，传统企业软件实现SaaS化非常困难。在激烈的企业服务市场竞争中，逆势而为不做SaaS化一定会被这个时代抛弃，而无法实现增长则意味着加速企业死亡。 为了加速发展，畅捷通下定决心进行转型，探索出了一条全新的道路：接入阿里云云市场的云盾应用服务（IDaaS），IDaaS是阿里云为企业用户提供的一套集中式身份、权限、应用管理服务。 垂直深耕成就财务SaaS领军者 当今企业服务市场，大部分企服公司纷纷转向了垂直领域的saas深耕。为什么小格局的垂直细分成为了大多数选择呢？道理其实很简单，好比电转打孔，力气小不要紧，只要力往一处使加上速度控制的更加合理，没有转不透的墙，畅捷通就是如此。 为了拓展财务领域的线上版图，畅捷通和阿里云云市场进行了线上开店、资源互换合作、联合投放等一系列活动。起初，只做财务领域的生意，客单量变化并不不明显，但畅捷通并没有放弃合作，继续想办法开拓线上财务市场。通过与阿里云云市场共创共同实践了“新通路合作模式”，阿里云开放自己的渠道资源和客户资源，畅捷通作为云市场的第三方服务商为企业的财务管理需求输出服务能力。 触达基础小微企业 线上扩张更上层楼 随着经济下行，下沉市场成为企业发展的一块新阵地。但小微企业对企业服务的认知程度浅，企业服务信息触达十分困难。在传统分销模式下，畅捷通在做市场下沉时几度碰壁。 畅捷通在和阿里云云市场合作过程中了解到阿里云心选模式并参与其中。合作期间，阿里云向畅捷通开放自己的渠道、流量以及多个平台（淘宝、天猫、1688、云市场等）资源，针对传统小微企业财务及管理转型问题，打造了云+应用新模式。通过这次基于心选模式的合作，畅捷通成功触达了数万小微企业。 截止目前，畅捷通与阿里云云市场的合作产品包括：好会计、好生意、薪税管家、T+/T+Cloud等。其中，小微企业——淄博深发汇源工贸公司通过使用畅捷通T+系统，旗下13家传统超市从需要耗费一周进行报表制作，到可以线上实时掌握库存动态，完成了公司内部财务的规范化管理，极大地节省了时间和人力成本。 凭借阿里云的生态合力，畅捷通不仅实现了原有体系架构的突破，实现了公司在财务软件服务领域的业务成长和SaaS化转型。 畅捷通与阿里云云市场合作的三年后，凭借阿里云的生态合力，畅捷通探索出了一条全新的To B行业营销通路以及可灵活复制的营销模式。通过线上线下商机营销模型的搭建，畅捷通完成了以大数据赋能技术融合、产品共创、商品售卖、生态交付的全链路底层基础设施建设。 畅捷通和阿里云的合作通路上已新增了2万多客户，销售金额近五千万。畅捷通还是第一家签约阿里云SaaS加速器的财务领域的公司，希望通过SaaS加速器的技术和商业资源武装自己。未来，畅捷通会继续携手阿里云，在服务小微企业的路上走得更高更远。 阿里云发布SaaS加速器，设置分销佣金政策招募具备分销能力的服务商分销SaaS，阿里云提供相关的培训支持、产品支持、技术支持等。https://yida.alibaba-inc.com/o/SaaS-Accelerator-Mobile点击链接填写表单信息，即可成为阿里云SaaS加速器合作伙伴

作者：闲鱼技术-剑辛 问题定义 在互联网行业，唯一不变的就是一直在变化。作为技术同学，我们经常会碰到以下几种需求：当用户收藏的商品降价后及时通知用户，促进双方交易达成；新用户或90天内未成交的用户浏览多个商品后引导用户主动和卖家聊天、也可以给用户发个红包促进用户首单的达成； 这些需求本质上是这样的逻辑：实时采集分析用户行为，通过规则计算，对符合条件的用户进行精准触达。普通开发模式很难比较好的承接这类需求，为此我们专门研发了omega系统解决这类问题。omega系统分为三个子系统： 行为采集中心 CEP规则中心 用户触达中心 我们在之前文章已经详细说明前两部分，本次我们将着重阐述用户触达系统是如何设计和实现策略灵活配置和精准触达的。 系统设计 2.1、逻辑架构 为了方便读者理解，我们简单回顾omega系统的逻辑架构。omega系统基于高内举低耦合的原则进行拆分，每个部分本身是独立完整的系统，也可以组装后提供服务。 第一层是用户行为采集中心，通过采集端上请求的MTOP(应用网关)接口和端上用户行为埋点，将数据清洗为规整的用户行为数据； 第二层是CEP规则计算中心，通过解析DSL生成Blink(Flink)流计算任务，输出满足规则的用户； 第三层为用户触达中心，定义触达策略和通道，将策略实时触达给用户。 三层环环相扣，既可单独对外提供服务，也可联合对外承接业务，目前已经在承接用户增长、玩法和安全相关业务。 以用户增长业务举例，当用户在体验的过程中，运营通过合理策略组合，引导用户完成交易行为，到达产品形态上的“啊哈”时刻。这些策略在端内可能是权益透出、POP和实时Push，在端外是Push、短信和外呼等手段。Omega系统通过整合端内/端外的主动/被动触达渠道，以用户的实时状态为核心，实现了一套满足长周期运营的策略编排技术方案体系。 2.2、触达流程 触达流程本身比较明确，我们将流程拆分为多个小的节点，每个节点之间通过配置化方式组合，保证每个节点是可插拔、可替换的实现。整体用户触达系统处理流程如下： 接收CEP规则计算结果，包括规则名和满足规则的用户； Action路由层根据规则名查询所有订阅此规则的Action列表；

原创： 丶平凡世界 公众号：SQL数据库开发 原文链接：https://mp.weixin.qq.com/s/z4I16VNgZsqdhbp0AwfTvQ 最近一直在忙公司的一个SQL项目，好久都没有给小伙伴们写原创文章了。 趁着项目上线的空闲，给大家总结一下，在开发项目过程中遇到的一些问题。之所以说它是”失败的”项目，是因为遇到的一些问题是完全可以避免，即使最后按要求完成了任务需求。 项目背景 公司新上线了一套OA系统，希望将公司成本类的真实数据实时反应到报表上，并且使用新的OA系统来呈现。希望从各个角度监控公司在产品开发上所花的成本情况。 已有资源 成本类的部分数据已经存在于BI报表平台，每天都有更新，这些业务逻辑的指标可以直接从BI报表平台获取。 待开发内容 此次项目开发需求新增了不同时期的指标对比，部分指标的经营曲线。 遇到的问题 1、需求未明确 在项目开发过程中，因为是公司内部开发，没有明确的需求文档，都是依靠口口相传，或通过邮件等来确认指标定义。 可能有些同学对需求这方面不太了解，觉得我表述清楚，你做出来就是了呀。道理是这个道理，但是这个做出来的过程，如果有很多不确定的因素存在，那么就会极大的影响开发效率。 在每开发一个指标之前，总是需要人再三确认才能开始写代码。开发过程中还是遇到一个“我以为”是这样，而实际上并非是这样的指标。导致之前写的逻辑需求推翻重写。 2、整体未规划好 整个项目，看着不大，无非就是新增几个版本对比和一些历史记录曲线而已。正是由于这种想法，导致一开始没有一个整体的规划，代码写到哪里就是哪。 原本有一些可以复用的代码，最后还是一个个单独使用。导致后续因为修改代码逻辑，得一个一个的全部再修改一遍。

PAI的输出 如上图所示为PAI平台的数据输出模块，需要明确的是数据的输入和输出都不是在PAI平台完成的，输入的数据和输出的数据都在MAXCOMPUTE中，PAI平台只是完成计算任务右键单击以上模块，查看输出数据则能看到输出数据的前100条，复制按钮可以将这100条数据复制并粘贴到本地，但是当输出数据大于100条时，则没有办法在PAI平台内实现 通过DATA WORKS的导出数据至本地的方法 通过DATA WORKS来进行MAXCOMPUTE中资源的管理，查看数据开发界面，可以发现并没有下载到本地的选项而是只有将本地数据上传至MAXCOMPUTE中选项 因此采用手动业务流程的方法，通过添加SQL组件来实现将输出数据下载到本地的操作标签中选择手动业务流程，可以看到流程节点，向可视化界面中添加一个ODPS SQL节点打开节点，并编写一条查询输出数据表中所有数据的SQL语句，点击运行，并可以看到输出表格并且在输出表格的下方有下载至本地的按钮，需要特别注意的是，SQL查询需要计算费用，具体费用会在计算前有提示 总结： 1、当输出数据在100条以上时，在PAI平台内无法将输出数据全部下载到本地2、PAI本身不存储数据，只进行计算3、DATA WORKS只有本地数据上传导入的入口，而没有单独的将数据下载到本地的入口4、可以通过手动业务流程来将数据下载到本地5、添加单个业务流程节点（ODPS SQL）并打开节点写一条查询所有输出数据表的SQL语句6、运行SQL查询语句费用会在运行前有提示，点击运行则在查询完成后会看到查询结果，下方有将查询结果下载到本地的按钮

2019年11月29日阿里云智能飞天大数据平台在北京国家会议中心召开 “首席技术官大数据专享会”，超过70位企业首席技术官和大数据平台负责人与会。会上由来自阿里云智能，阿里巴巴搜索推荐事业部，阿里巴巴CRO技术部，友盟+的四位分享嘉宾进行了精彩演讲。在飞天大数据平台技术公开课的第六季中，我们将为广大开发者做此次专享会的线上首播，欢迎开发者们收看。 《 阿里经济体大数据平台的建设与思考 》 分享嘉宾：关涛（观涛）阿里云智能计算平台事业部 研究员直播时间：12月10日 19:00-19:45 《 解密淘宝推荐实战，打造“比你还懂你”的个性化APP 》分享嘉宾：欧文武（三桐）阿里巴巴搜索推荐事业部 资深算法专家直播时间：12月12日 19:00-19:45 《 阿里风控大脑关于大数据应用的探索与实践 》分享嘉宾：丁明峰（山蜂）阿里巴巴CRO技术部 高级数据技术专家直播时间：12月17日 19:00-19:45 《 可闭环

作者：闲鱼技术-吴白 引言 闲鱼是一个C2C平台，提高卖家活跃度不仅有利于成交的提升，对于用户增长也有积极意义。而其中的关键点就在于其成交的效率。而个人卖家由于其专业程度不如专业卖家，成交效率往往并不高。我们希望可以实现两个提升：能帮助卖家提高其成交效率。 可以快速的接入新的场景。 通过对线上数据进行分析，我们发现一些有趣的现象，比如：使用真人头像的卖家，会有更多的用户访问其主页或商品(潜在的流量来源)；回复积极的卖家更易成交；距离越近/信息越丰富的商品也更易售出。 卖家行为闭环 卖家活跃度最大的核心点在于是否能成交，所以我们以成交为抓手来提高卖家的在线活跃度。根据前面的观察，卖家行为可以影响其成交，这些影响有的显而易见，有的则没那么明显，基于这个我们做了一些尝试。 基于卖家行为的尝试 卖家的目的一定是成交，所以我们以成交转化为目的，基于线上的算法模型做了一轮模拟，模拟基于两个关键指标 在线状态。当前用户在线状态以及距离上一次在线时长。 询单回复统计。用户在过去半小时的询单回复情况。 算法模型在这里不做涉及，因为有更专业的算法同学来完成，在这里我们只解决工程侧的问题。首先我们定义了用户在闲鱼上的行为4要素：1）when。2）where。3）what。4）who。when和where定义卖家的时间和空间纬度，what刻画了行为本身，who则是对于行为主体人的表达。 另一方面卖家行为描述起来很简单，但是要正确识别却并不简单。比如一个完整的卖家回复行为需要做如下拆解 买家基于商品和卖家创建对话。 买家基于对话给卖家发送消息。 卖家基于对话回复买家消息。 上面三个行为必须满足约束：1）时间有序。2）行为2可以重复发生。3）行为1，2，3之间可能存在干扰(自动回复，安全提醒等)。基于此我们选择用CEP来做复杂事件模型匹配，选型上对比轻量/灵活性/使用成本上综合对比了Siddhi以及flink cep，最终选择Siddhi来作为前期的cep计算引擎。 以上是算法基于两个指标的模拟结果，数据因为安全原因进行了脱敏。纵轴越大表示成交越多。横轴表示基于用户在线状态&回复行为的多维特征。从模拟结果上可以看到在线状态&回复积极的卖家更容易促成成交，这从一个方面说明卖家的行为确实会潜在的影响其成交效率。 构造完整闭环