1.石油市场价格抓取算法

2.成品油的定价机制

油价算法为什么不变价_油价为什么降价了

以国际油价为80元,国内油价为6元为例:  

当油价从80 元涨到83.2元,涨幅达到4%,油价从6元升到6.3元;  

当油价从83.2元跌回80元, 跌幅不到4%,油价不变;  

当油价又从80元涨到83.2元,涨幅达到4%,油价从6.3元升到6.6元;  

当油价从83.2元跌回80元, 跌幅不到4%,油价不变;  

当油价又从80元涨到83.2元,涨幅达到4%,油价从6.6元升到6.9元;  

当油价从83.2元跌回80元, 跌幅不到4%,油价不变;  

当油价又从80元涨到83.2元,涨幅达到4%,油价从6.9元升到7.2元;  

当油价从83.2元跌回80元, 跌幅不到4%,油价不变;  

当油价又从80元涨到83.2元,涨幅达到4%,油价从7.2元升到7.5元

这哥们比统计局,发改委有才多了,竟然发现了油价的秘密

石油市场价格抓取算法

这个问题主要还是分三方面,一方面是国际方面,一个是国内方面,还有我国原油现状是进口国而不是出口国,也就是说国家需求大于供应。

国际方面

1、中东地区长期的,大量的油田被迫减产或停产,原油供应不足等等直接导致国际原油价格上下波动,加上加上油价从去年年底开始就已经突破60美元每桶,并且有持续上涨的趋势。

2、国际原油一般也是由美国一手操纵的,而中国并没有定价权。在石油大战愈演愈烈的今天,恶意控制油价,已经成为美国打击对手的手段。而现在的中国对石油的依赖越来越大。

国内方面

1、石油的垄断,中石油、中石化、中海油三桶油都是中字头,但是又不能亏本赚买卖,所以提升部分价格,价格越高赚的钱越多。

2、税太高,我国油价税款里面有0.83%的地方教育附加税,1.24%的教育附加税,1.75%的企业所得税,2.89%的城建税,14.53%的增值税,26.81%的消费税,而汽油的税收占了一升成品油价格中的48.05%,也就是说真正成品油的成本只占到了成品油总价的51.95%(如果油价是10块,税收占了4.85元,而真正的油价才是5.19元)。

3、如果油价太低,会直接影响到新能源产业,比如电动汽车,本身就贵,要是油价再低一点,大家都去买汽油车了,这样谁还去买新能源车。

4、如果油价低了,大家都开车了,这样会导致能步行的也开车,能骑自行车的也开车,因为出行成本低嘛,而且中国的汽车就多,人也多,马路停车不熄火,浪费严重。

需求方面

我们国家需求大于供应,由于国内对原油需求量较大,国内各大炼油厂炼油盈利能力相比于发达国家仍有不足,炼油成本提高了,国内油价自然就上涨了。

参考资料:

首先,这跟国际油价持续呈现出来的上升势头不无关系。纽约市场和北海布伦特油价,作为两个重要的基准油价,都突破了每桶60美元的高价。这跟世界上两大石油资源大国——沙特阿拉伯和俄罗斯又有很大的关系。石油输出国组织,简称“欧佩克”与俄罗斯达成了延长减产的协议,这也使得供不应求的现象产生,自然,油价就会上涨。虽然减产会对销售额造成影响,但是高油价也是这些石油大国希望看到的,而且对他们有利。

其次,投机者进入到石油市场也对油价有很大的干扰。之前有消息报道,石油国家伊朗发生了“骚乱”,而这给了投机分子可乘之机,他们大肆鼓吹,原油供应会受到此次“骚乱”的影响,而且基准油价之一的北海布伦特油价将会直接达到100美元一桶。这对于油价的上涨是有着巨大的推动作用的。

最后,巨大的需求也是油价上涨的一个主要原因。这其中又包括了四个主要因素:第一,世界经济对原油的依赖程度。第二、世界经济的复苏也是不断拉动石油需求增加的基本原因。第三、中东国家甚至是俄罗斯本国内的恐怖袭击等不确定因素也对油价的波动产生了很大的影响。第四、制造业的快速发展也使得对石油等能源消费的急剧增加。基于这四点原因,在巨大的需求之下,油价就会一直上涨。

参考资料:

国内油价3连涨 90号油每升涨0.19元 1箱油涨十块--法

人民网评:油价首涨,消费税如何依法调节--观点--人民网

国内各地油价查询-油价网

成品油的定价机制

由于网站上的石油市场价格历史数据的时间粒度从年一直精确到日,所有的下载靠人工完成是很困难的,而且由于下载到本地之后的表格字段并不规范,所以必须要根据数据库字段的要求对字符串和Excel表格操作,使之规范化后再入库。其难点在于实现石油市场价格的自动抓取完成对数据源的自动下载,数据源的自动更新,与管理平台的无缝链接,以及ActiveX 插件的制作。

5.3.1.1 数据源的自动下载

石油市场价格数据有3个数据源,包括美国能源部能源信息署(EIA)、《华尔街日报》(WJS)和中石油(CNPC)的数据。这些数据源皆为互联网上的资源。针对3个不同的数据源的特点,采用远程自动下载及规范化,以及基于正则表达式的网页数据自动抓取两种不同的技术完成。

(1)远程自动下载及规范化

对于美国能源部网站的油价历史数据,通过设计自动下载引擎,完成对其历史油价数据的自动远程下载,按照指定路径保存到本地,并将每次下载的结果保存到数据库下载日志表;将下载下来的数据进行清洗、转换并上载到中心数据库。

(2)基于正则表达式的网页数据自动抓取技术

由于大部分网页数据并没有提供下载的通道,而且油价数据同股价数据一样更新频率很高。因此需要对网站上的数据进行基于正则表达式网页数据自动抓取。华尔街油价数据、美国能源部上的油价事件、中石油网页上的油价数据,均需要通过正则表达式的网页自动抓取功能来实现。

网页抓取需要解决的问题:

1)得到需要抓取的网页的地址列表(URL);

2)根据网页的地址去请求,得到网页的内容;

3)分析网页(HTM L)的结构,并提取出需要的内容,即使用网页结构化信息抽取技术或元数据采集技术。可以使用基于字符串查找定位和基于DOM(Document Object Model)结构的分析;数据抓取结构体系,如图5.27所示。

图5.27 B/S网页事件抓取结构体系

正则表达式的网页数据自动抓取技术涉及网页源码数据的本地化操作,装载源码数据控件的选择,相关信息源码的抓取,源代码的去行操作,数据中含有超链接和字体变换的HTML标签元素的去除,应用零款断言和截取子字符串等字符串函数的方法来抓取数据以及数据入库这些操作(图5.28)。

图5.28 基于正则表达式的网页信息抓取过程

5.3.1.2 数据源的自动更新

当完成对历史数据的初始化之后,需要设计监控引擎,监控网站数据源的更新情况,以决策是否执行增量下载任务。其监控引擎采用实时监控技术以及周期性检测技术。当执行增量下载任务之后,需要对下载数据的有效性和完整性进行检查,指定的数据源要定格式、定期进行更新。数据源的自动更新,主要依据站点在对数据更新之后系统能及时发现并自动快速地获取更新。从站点上获取更新的手段,涉及数据更新后的更新超链接、按钮变化后的触发网址的变动,分析网址来获得更新等,如:《华尔街日报》的期货油价就是按照将日期写进网址来制作更新的;若是周末或是节假日期间网址同样存在只是网页上无相关内容,于是便要考虑此次更新获得的数据是否有效和存在;另外在处理如AJAX 等网址不变的网络站点或者站点的更新不能从网址上得到解释时,使用针对网页的高级字符串操作来获取更新,前述的正则表达式便是最有效的方法之一。

5.3.1.3 与管理平台的无缝链接

管理平台的功能是要使下载、更新的多个任务按照程式的设计,分配到计算机的几个线程中,通过对线程的调度,达到自动下载和更新的有效管理。为此需要设计审核功能、日志功能、重试次数的阈值,以及开启多个Excel进程的功能。通过审核功能,可以查明自动下载过程中的异常,便于进行人工干预;通过日志功能,可以帮助我们依据日志对任务执行中的错误进行追踪和对出错原因进行判断;通过设置重试次数阈值,可以实现任务执行失败后重试;通过开启多个Excel进程的功能,可以实现EIA的Excel数据自动读取和转换。

5.3.1.4 预测程序ActiveX插件的制作

由于油价预测程序是基于C/S架构开发,要将程序发布到B/S架构必须使用插件技术从服务器端向客户端安装预测程序的核心部件,以达到对油价模型更新而不用再单独编写程序的目的,这样就保证了程序的完整性和解决方案之间的良好衔接。

创建ActiveX插件的过程,必须让系统提供一个接口使得插件能够完整地从后台链接到前台。因为工程无法生成tlb文件,没有tlb文件也就意味着注册失败,以及dll文件或ActiveX 控件在客户端无法使用。创建的类就是通过代码的方式将dll文件在客户端注册,生成tlb文件,使得.exe程序能够在B/S体系下进行操作。

自1998年迄今,中国已经历了三次成品油定价机制改革。

1998年6月3日,原国家计委出台《原油成品油价格改革方案》,规定中石油和中石化两个集团公司之间原油交易结算价格由双方协商确定,价格由原油基准价和贴水两部分构成。其中原油基准价由原国家计委根据国际市场相近品质原油上月平均价格确定,贴水由购销双方协商确定。

汽、柴油实行政府指导价,由原国家计委按进口完税成本为基础加国内合理流通费用确定零售中准价,中石油、中石化集团公司在此基础上并在上下浮动5%的幅度内确定具体零售价。

从2000年6月份起,国内成品油价开始参考国际市场价格变化相应调整,当时参考的只有新加坡市场的油价。

从2001年11月份起,中国又一次进行成品油定价机制改革。改革的核心是国内成品油价格改为参照新加坡、鹿特丹、纽约三地市场价格调整国内成品油价格,当国际油价上下波动幅度在5%-8%的范围内时保持油价不变,超过这一范围时由国家发改委调整零售中准价。

2006年3月26日,国家发改委在宣布成品油价上调的同时,向地方传达了石油综合配套改革方案。方案包括两大内容:一是成品油价由原来的与国际成品油价直接接轨,改为以国际市场原油价格为基础,加上国内合理加工成本和适当利润确定。二是推出“四个配套机制”:包括建立石油企业内部上下游利益调节机制;建立相关行业价格联动机制;建立对种粮农民等部分弱势群体和部分公益性行业给予补贴的机制;建立原油涨价收入的财政调节机制。