怎麼爬取股票信息

A. 爬取股票信息是網路爬蟲的應用場景嗎

網路爬蟲可以用來爬取股票信息，因為股票信息可以在互聯網上搜索並獲取，網路爬蟲可以自動收集這些信息。網路爬蟲是一種自動地抓取互聯網信息的程序，能夠按照指定的規則自動地抓取網站上的信息，是一種常見的數據抓取技術。

B. 怎麼從股票盤面上得到信息

股市上的風雲變化一般都會表現在每天的股票盤面上，作為一個合格的投資者就需要從盤面上就能得到自己想要的信息。盤面上的信息非常充足，盤面股指(走弱或走強)可以預測出股市背後隱性的信息，但這些是需要一些方法技巧去解讀，那麼。觀察股票盤面需要重點從哪方面入手呢？下面由來教大家怎樣從股票盤面上得到自己想要的信息。
1、看大盤走勢：
在這里主要分析收陰陽的情況、成交量情況，與相比是否怎麼樣的情況，整個量價關系是否正常，在日K線的位置、含義，看整個日K線整體趨勢，判斷是否可以參與個股，能否出現中線波段，當前大盤處於哪一級趨勢的那個階段。綜合排名榜，市場各要素都展現在這里，那些個股在活躍，那些個股在出逃最強烈，那些個股在拉尾市勾當，那些在尾市打壓製造恐慌假象，那些個股盤輕如燕，那些步履蹣跚，這是主力的照妖鏡。
看當日大盤波動情況，什麼時候在拉抬、什麼時候在打壓，拉抬是那些股，打壓又是那些股，他們對大盤的影響力又是如何。看漲跌平個股家數，了解大盤漲跌是否正常。
了解流通市值前10名個股的運況，以及對大盤的影響，如果不是大盤股影響大盤，找出影響大盤的板塊。了解大盤當日的高低點含義，了解大盤的阻力和支持位，了解大盤在什麼位置有吸盤和拋壓，了解那些個股在大盤打壓之前先打壓，那些個股在大盤打壓末期先止住啟動。如果你掌握基本要素和復盤熟練的要求後，那麼你的盤面感覺肯定是不同的。
2、看自己的自選股：
每天都要觀察是不是按照自己預想的在走，檢驗自己的選股方法，有那些錯誤，為什麼出錯，找出原因，改進。看那些個股已經出現買點(買點自己定的，按照什麼標准也是你自己定的)的個股，你要做一個投資計劃，包括怎麼樣情況怎麼買，買多少、多少價格、止損位設置等。
3、看兩市漲跌幅榜：
(1)了解當日k線在日k線圖中的位置，含義。再看周k線和月k線，在時間上、空間上了解主力參與程度、用意和狀態。
(2)在了解個股的過程中，把那些處於低部攻擊狀態的個股挑出來，仔細觀察日K線、周K線、月K線所經歷的時間和空間、位置等情況良好的，剔除控盤嚴重的庄股和主力介入不深和游資阻擊的個股，剩餘的再看一下基本面，有的調研報告最好調出來看一下，符合的進入自己的自選股。(3)對照大盤走勢，與大盤比較強弱，了解主力參與程度，包括其攻擊、護盤、打壓、不參與等情況可能，了解個股量價關系是否正常，主力拉抬或打壓時動作、真實性以及目的用意。了解一般投資者的參與程度和熱情。
(4)對漲幅前2版和跌幅後2版的個股要看的特別仔細。了解那些個股在悄悄走強，那些個股已是強弓之弩，那些個股在不計成本的出逃，那些個股正在突破啟動，那些個股正在強勁的中盤，也就說，有點象人口普查，了解各部分的狀態，這樣才能對整個大盤的情況基本上了解大概。

C. 如何利用一些 finance 資料庫 api 批量獲取股票信息

1、通過API獲取實時數據
請求地址
http://finance.yahoo.com/d/quotes.csv?s=<股票名稱>&f=<數據列選項>
參數
s –表示股票名稱，多個股票之間使用英文加號分隔，如」XOM+BBDb.TO+JNJ+MSFT」，羅列了四個公司的股票：XOM,BBDb.TO, JNJ, MSFT。
f – 表示返回數據列，如」snd1l1yr」。更詳細的參見雅虎股票 API f參數對照表。
2、通過API獲取歷史數據
請求地址
http://ichart.yahoo.com/table.csv?s=<string>&a=<int>&b=<int>&c=<int>&d=<int>&e=<int>&f=<int>&g=d&ignore=.csv
參數
s – 股票名稱
a – 起始時間，月
b – 起始時間，日
c – 起始時間，年
d – 結束時間，月
e – 結束時間，日
f – 結束時間，年
g – 時間周期。Example: g=w, 表示周期是』周』。d->』日』(day),w->』周』(week)，m->』月』(mouth)，v->』dividendsonly』
一定注意月份參數，其值比真實數據-1。如需要9月數據，則寫為08。
3、通過API獲取深滬股票數據
雅虎的API是國際性的，支持查詢國內滬深股市的數據，但代碼稍微變動一下，如浦發銀行的代號是：600000.SS。規則是：上海市場末尾加.ss，深圳市場末尾加.sz。
最近股市甚火，受聘開發一股票網站，股票的數據從哪裡來成了一個大問題，股票軟體一般都是加密處理的，還有一些webservices也是要帳號 的，免費的方法只有一種了，抓別人網站的數據。好在經我研究，發現yahoo提供國內和國外股市每天的交易數據資料，這可謂一大幸事啊。
http://table.finance.yahoo.com/table.csv?s=ibm&d=6&e=22&f=2006&g=d&a=11&b=16&c=1991&ignore=.csv
上面的鏈接可以抓取IBM股票從1991年11月16日起到2006年6月22的數據。把ibm改成sohu，就可以抓到sohu的股票數據了。
http://table.finance.yahoo.com/table.csv?s=sohu&d=6&e=22&f=2008&g=d&a=11&b=16&c=2008&ignore=.csv
上面鏈接可以抓搜狐股票的數據。
那麼中國股市的數據有沒有呢？答案是肯定的，不過要按照下面的參數做些調整，下面提供全球證券交易所的資料。
上證股票是股票代碼後面加上.ss，深證股票是股票代碼後面加上.sz
例如：000001 = 000001.sz
深市數據鏈接：http://table.finance.yahoo.com/table.csv?s=000001.sz
上市數據鏈接：http://table.finance.yahoo.com/table.csv?s=600000.ss
上證綜指代碼：000001.ss，深證成指代碼：399001.SZ，滬深300代碼：000300.ss
下面就是世界股票交易所的網址和縮寫，要查找哪個股票交易所的數據，就按照上面的格式以此類推。
上海交易所=cn.finance.yahoo.com,.SS,Chinese,sl1d1t1c1ohgv
深圳交易所=cn.finance.yahoo.com,.SZ,Chinese,sl1d1t1c1ohgv
美國交易所=finance.yahoo.com,,United States,sl1d1t1c1ohgv
加拿大=ca.finance.yahoo.com,.TO,Toronto,sl1d1t1c1ohgv
紐西蘭=au.finance.yahoo.com,.NZ,sl1d1t1c1ohgv
新加坡=sg.finance.yahoo.com,.SI,Singapore,sl1d1t1c1ohgv
香港=hk.finance.yahoo.com,.HK,Hong Kong,sl1d1t1c1ohgv
台灣=tw.finance.yahoo.com,.TW,Taiwan,sl1d1t1c1ohgv
印度=in.finance.yahoo.com,.BO,Bombay,sl1d1t1c1ohgv
倫敦=uk.finance.yahoo.com,.L,London,sl1d1t1c1ohgv
澳洲=au.finance.yahoo.com,.AX,Sydney,sl1d1t1c1ohgv
巴西=br.finance.yahoo.com,.SA,Sao Paulo,sl1d1t1c1ohgv
瑞典=se.finance.yahoo.com,.ST,Stockholm,sl1d1t1c1ohgv

D. python用什麼方法或者庫可以拿到全部股票代碼

首先你需要知道哪個網站上有所有股票代碼，然後分析這個網站股票代碼的存放方式，再利用python寫一個爬蟲去爬取所有的股票代碼

E. 如何用python 爬蟲抓取金融數據

獲取數據是數據分析中必不可少的一部分，而網路爬蟲是是獲取數據的一個重要渠道之一。鑒於此，我拾起了Python這把利器，開啟了網路爬蟲之路。

本篇使用的版本為python3.5，意在抓取證券之星上當天所有A股數據。程序主要分為三個部分：網頁源碼的獲取、所需內容的提取、所得結果的整理。

一、網頁源碼的獲取

很多人喜歡用python爬蟲的原因之一就是它容易上手。只需以下幾行代碼既可抓取大部分網頁的源碼。

為了減少干擾，我先用正則表達式從整個頁面源碼中匹配出以上的主體部分，然後從主體部分中匹配出每隻股票的信息。代碼如下。

pattern=re.compile('<tbody[sS]*</tbody>')
body=re.findall(pattern,str(content)) #匹配<tbody和</tbody>之間的所有代碼pattern=re.compile('>(.*?)<')
stock_page=re.findall(pattern,body[0]) #匹配>和<之間的所有信息

其中compile方法為編譯匹配模式，findall方法用此匹配模式去匹配出所需信息，並以列表的方式返回。正則表達式的語法還挺多的，下面我只羅列所用到符號的含義。

語法 說明

. 匹配任意除換行符「 」外的字元

* 匹配前一個字元0次或無限次

？ 匹配前一個字元0次或一次

s 空白字元：[<空格> fv]

S 非空白字元：[^s]

[...] 字元集，對應的位置可以是字元集中任意字元

(...) 被括起來的表達式將作為分組，裡面一般為我們所需提取的內容

正則表達式的語法挺多的，也許有大牛隻要一句正則表達式就可提取我想提取的內容。在提取股票主體部分代碼時發現有人用xpath表達式提取顯得更簡潔一些，看來頁面解析也有很長的一段路要走。

三、所得結果的整理

通過非貪婪模式(.*?)匹配>和<之間的所有數據，會匹配出一些空白字元出來，所以我們採用如下代碼把空白字元移除。

stock_last=stock_total[:] #stock_total：匹配出的股票數據for data in stock_total: #stock_last：整理後的股票數據
if data=='':
stock_last.remove('')

最後，我們可以列印幾列數據看下效果，代碼如下

print('代碼',' ','簡稱',' ',' ','最新價',' ','漲跌幅',' ','漲跌額',' ','5分鍾漲幅')for i in range(0,len(stock_last),13): #網頁總共有13列數據
print(stock_last[i],' ',stock_last[i+1],' ',' ',stock_last[i+2],' ',' ',stock_last[i+3],' ',' ',stock_last[i+4],' ',' ',stock_last[i+5])

F. 怎樣把股票的最新動態行情價格等信息調用到網站上

1，進入財經網站。如新浪財經。

2.進入股票界面，添加自選股。

3.添加自選股最後計入版塊。

4.版面信息只要打開網頁就可以顯示，內容豐富。

G. 如何使用Python獲取股票分時成交數據

可以使用爬蟲來爬取數據，在寫個處理邏輯進行數據的整理。你可以詳細說明下你的需求，要爬取的網站等等。
希望我的回答對你有幫助

H. 如何利用一些 finance 資料庫 api 批量獲取股票信息

使用Yahoo API獲取股票信息。

I. 想要通過股票代碼查出股票的具體信息該怎麼做

想要通過股票代碼查出股票的具體信息，可以通過幾個方法：

1.下載股票交易APP，輸入代碼查詢信息。

2.通過網路查詢，搜索出股票具體信息。

3.找到證券公司，通過證券公司幫忙查出股票具體信息。

股票代碼是股票的身份證明，不同的股票代碼有不同的含義，通過股票代碼的查詢，可以了解股票的相應信息。隨著網路的發展，越來越多的人通過網路，了解股票相關信息，非常方便快捷。

有很多老年人不會上網，無法通過網路獲得股票信息，在只知道股票代碼的情況下，可以去線下證券公司查詢，讓證券公司的人員，幫忙查詢相關信息。只要告訴他們股票代碼，他們就能幫助查出股票具體信息。

想要通過股票代碼查詢出股票的具體信息，在網路時代非常方便。大家對此有什麼其他看法，歡迎留言討論。

J. 如何獲取實時的股票行情信息，有相關的公用介面或者數據源嗎

實時股票數據介面

股票數據的獲取目前有如下兩種方法可以獲取:
1.
http/javascript介面取數據
2.
web-service介面
1.http/javascript介面取數據
1.1Sina股票數據介面
以大秦鐵路（股票代碼：601006）為例，如果要獲取它的最新行情，只需訪問新浪的股票數據
介面：
http://hq.sinajs.cn/list=sh601006
這個url會返回一串文本，例如：
var
hq_str_sh601006="大秦鐵路, 27.55, 27.25, 26.91, 27.55, 26.20, 26.91,
26.92,
22114263, 589824680, 4695, 26.91, 57590, 26.90, 14700,
26.89, 14300,
26.88, 15100, 26.87, 3100, 26.92, 8900, 26.93,
14230, 26.94, 25150, 26.95, 15220, 26.96, 2008-01-11,
15:05:32";
這個字元串由許多數據拼接在一起，不同含義的數據用逗號隔開了，按照程序員的思路，順序號從0開始。
0：」大秦鐵路」，股票名字；
1：」27.55″，今日開盤價；
2：」27.25″，昨日收盤價；
3：」26.91″，當前價格；
4：」27.55″，今日最高價；
5：」26.20″，今日最低價；
6：」26.91″，競買價，即「買一」報價；
7：」26.92″，競賣價，即「賣一」報價；
8：」22114263″，成交的股票數，由於股票交易以一百股為基本單位，所以在使用時，通常把該值除以一百；
9：」589824680″，成交金額，單位為「元」，為了一目瞭然，通常以「萬元」為成交金額的單位，所以通常把該值除以一萬；
10：」4695″，「買一」申請4695股，即47手；
11：」26.91″，「買一」報價；
12：」57590″，「買二」
13：」26.90″，「買二」
14：」14700″，「買三」
15：」26.89″，「買三」
16：」14300″，「買四」
17：」26.88″，「買四」
18：」15100″，「買五」
19：」26.87″，「買五」
20：」3100″，「賣一」申報3100股，即31手；
21：」26.92″，「賣一」報價
(22,
23), (24, 25), (26,27), (28,
29)分別為「賣二」至「賣四的情況」
30：」2008-01-11″，日期；
31：」15:05:32″，時間；
一個簡單的JavaScript應用例子:
script
type="text/javascript" src="http://hq.sinajs.cn/list=sh601006"
charset="gb2312">/script>
/javascript">
var
elements=hq_str_sh601006.split(",");
document.write("current
price:"+elements[3]);
這段代碼輸出大秦鐵路（股票代碼：601006）的當前股價
current
price:14.20
如果你要同時查詢多個股票，那麼在URL最後加上一個逗號，再加上股票代碼就可以了；比如你要一次查詢大秦鐵路（601006）和大同煤業（601001）的行情，就這樣使用URL：
http://hq.sinajs.cn/list=sh601003,sh601001
查詢大盤指數，比如查詢上證綜合指數（000001）：
http://hq.sinajs.cn/list=s_sh000001
伺服器返回的數據為：
var
hq_str_s_sh000001="上證指數,3094.668,-128.073,-3.97,436653,5458126";
數據含義分別為：指數名稱，當前點數，當前價格，漲跌率，成交量（手），成交額（萬元）；
查詢深圳成指數：
http://hq.sinajs.cn/list=s_sz399001
對於股票的K線圖，日線圖等的獲取可以通過請求http://image.sinajs.cn/…./…/*.gif此URL獲取，其中*代表股票代碼，詳見如下：
查看日K線圖：
http://image.sinajs.cn/newchart/daily/n/sh601006.gif

分時線的查詢：
http://image.sinajs.cn/newchart/min/n/sh000001.gif

日K線查詢：
http://image.sinajs.cn/newchart/daily/n/sh000001.gif

周K線查詢：
http://image.sinajs.cn/newchart/weekly/n/sh000001.gif

月K線查詢：
http://image.sinajs.cn/newchart/monthly/n/sh000001.gif

1.2
Bai&Google的財經數據
在,
google中搜索某隻股票代碼時，將會在頭條顯示此股票的相關信息，例如在google搜索601006時，
第一條搜索結果如下圖：
通過點擊左邊的圖片我們發現會將此圖片鏈接到sina財經頻道上，也就是說google股票數據的獲取也是從sina獲取。後經抓包分析，發現google也是採用1.1中介紹的介面。
Bai的股票數據來自的財經頻道
http://stock..com/
1.3
其他方式
除了sina，等網站提供股票信息外，其他網站也有類似的介面。我們分析了一款論壇上採用的股票插件，
其中有關於實時股票數據獲取的介紹，詳見如下代碼，其中可以看到有些數據來自sina。
以下是ASP示例:
=5
then
stockdata=gethttp("http://hq.sinajs.cn/list=sh"&code&"")
if
not len(stockdata)=0 then
stockdata=split(stockdata,chr(34))(1)
end if
if
len(stockdata)=0
then
stockdata="0,0,0,0,0,0,0,0,0,0,0,0"
else
stockdatasplit=split(stockdata,",")
stockdata=""&exstock.checkstr(stockdatasplit(0))&","&stockdatasplit(1)&","&stockdatasplit(2)&","&stockdatasplit(3)&","&stockdatasplit(4)&","&stockdatasplit(5)&","&formatdatetime(""&stockdatasplit(30)&"
"&stockdatasplit(31)&"",0)&""
end
if
『0=股票名稱,1=開盤價格,2=昨收盤價格,3=當前價格,4=最高價,5=最低價,6=更新時間
getstockdata=stockdata
end
function
function getstockimg(code)
dim
rndnum,addnum,checkcode,imgsource
if len(code)=5
then
getstockimg="http://image.sinajs.cn/newchart/daily/n/sh"&code&".gif"
end
if
imgsource="http://finance.sina.com.cn"
case
3
getstockimg="http://hq.gazxfe.com/stockchart/realline.chart?"&code&"&1003&SZ
500 330"
imgsource="http://hq.gazxfe.com"
case
4
getstockimg="http://chartse.stockstar.com/chartserver?code="&code&""
imgsource="http://www.stockstar.com/"
end
select
getstockimg=split(""&getstockimg&"||"&imgsource&"","||")
end
function
function getastockimg()
dim
rndnum,addnum,checkcode
dim
getastockimgb,imgsource
addnum=6
randomize:rndnum=cint(rnd*addnum)
select
case rndnum
case
0
getastockimg="http://202.109.106.1/gifchartse/gif/000001.gif"
getastockimgb="http://202.109.106.1/gifchartse/gif/399001.gif"
imgsource="http://www.stockstar.com/"
case
1
getastockimg="http://money.163.com/special/100.gif?C39"
getastockimgb="http://money.163.com/special/101.gif?HrS"
imgsource="http://www.163.com"
case
2
getastockimg="http://www.10jqka.com.cn/curve/realtime/index2.php?code=1a0001&w=180&h=140"
getastockimgb="http://www.10jqka.com.cn/curve/realtime/index2.php?code=399001&w=180&h=140"
imgsource="http://www.10jqka.com.cn"
case
3
getastockimg="http://chart.cnlist.com/stockchart/realline.chart?1a0001&1002&SZ
180
140"
getastockimgb="http://chart.cnlist.com/stockchart/realline.chart?399001&1002&SZ
180
140"
imgsource="http://chart.cnlist.com/"
case
4
getastockimg="http://image.sinajs.cn/newchart/small/ish000001.gif?1189176558328"
getastockimgb="http://image.sinajs.cn/newchart/small/isz399001.gif?1189176558328"
imgsource="http://www.sinajs.cn"
case
5
getastockimg="http://218.1.72.66/cgi/pic/sh/realtime/JA000001164143.png"
getastockimgb="http://218.1.72.66/cgi/pic/sz/realtime/JA399001164143.png"
imgsource="http://www.cnstock.com/"
case
6
getastockimg="http://222.73.29.85/img/000001.png"
getastockimgb="http://222.73.29.85/img/399001.png"
imgsource="http://www.eastmoney.com/"
end
select
getastockimg=split(""&getastockimg&"||"&getastockimgb&"||"&imgsource&"","||")
end
function
%>
2.
web-service介面
2.1 CHINAstock的web-service：
http://www.webxml.com.cn/WebServices/ChinaStockWebService.asmx
中國股票行情數據
WEB 服務（支持深圳和上海股市的全部基金、債券和股票），數據即時更新。輸出GIF分時走勢圖、日/周/月 K
線圖、及時行情數據（股票名稱、行情時間、最新價、昨收盤、今開盤、漲跌額、最低、最高、漲跌幅、成交量、成交額、競買價、競賣價、委比、買一 - 買五、賣一 -
賣五）。此WEB服務提供了如下幾個介面：
2.1.1
getStockImageByCode
GET
股票GIF分時走勢圖
INput：theStockCode =
股票代號，如：sh000001
POST /WebServices/ChinaStockWebService.asmx
HTTP/1.1
Host: www.webxml.com.cn
Content-Type:
text/xml; charset=utf-8
Content-Length:
length
SOAPAction:
"http://WebXml.com.cn/getStockImageByCode"

string

Output：
2.1.2
getStockImageByteByCode
獲得中國股票GIF分時走勢圖位元組數組
INput：theStockCode
= 股票代號，如：sh000001
POST /WebServices/ChinaStockWebService.asmx
HTTP/1.1Host: www.webxml.com.cnContent-Type: text/xml;
charset=utf-8Content-Length: lengthSOAPAction:
"http://WebXml.com.cn/getStockImageByteByCode"
string
返回的數據如下：
hkMyt4m4VkJtstbv8A
2.1.3
getStockImage_kByCode
直接獲得中國股票GIF日/周/月 K
線圖（545*300pixel/72dpi）
INPUT: theStockCode =
股票代號
theType = K 線圖類型（D：日[默認]、W：周、M：月），
POST
/WebServices/ChinaStockWebService.asmx HTTP/1.1Host:
www.webxml.com.cnContent-Type: text/xml; charset=utf-8Content-Length:
lengthSOAPAction: "http://WebXml.com.cn/getStockImage_kByCode" string
string
比如按照下圖所示輸入：
返回的結果就是周K線圖：
2.1.4
getStockImage_kByteByCode
獲得中國股票GIF日/周/月 K
線圖位元組數組
Input：theStockCode = 股票代號，如：sh000001
POST
/WebServices/ChinaStockWebService.asmx HTTP/1.1Host:
www.webxml.com.cnContent-Type: text/xml; charset=utf-8Content-Length:
lengthSOAPAction: "http://WebXml.com.cn/getStockImage_kByteByCode" string string
HTTP/1.1 200 OKContent-Type: text/xml; charset=utf-8Content-Length: length
base64Binary
比如按照下圖輸入：
返回的結果就是周K線圖位元組數組
hkMyt4m4VkJtstbv8A
2.1.5
getStockInfoByCode
獲得中國股票及時行情
input：theStockCode
= 股票代號
POST /WebServices/ChinaStockWebService.asmx HTTP/1.1Host:
www.webxml.com.cnContent-Type: text/xml; charset=utf-8Content-Length:
lengthSOAPAction: "http://WebXml.com.cn/getStockInfoByCode"
string
返回的值一個一維字元串數組
String(24)，結構為：String(0)股票代號、String(1)股票名稱、String(2)行情時間、String(3)最新價（元）、String(4)昨收盤（元）、String(5)今開盤（元）、String(6)漲跌額（元）、String(7)最低（元）、String(8)最高（元）、String(9)漲跌幅（%）、String(10)成交量（手）、String(11)成交額（萬元）、String(12)競買價（元）、String(13)競賣價（元）、String(14)委比（%）、String(15)-String(19)買一
- 買五（元）/手、String(20)-String(24)賣一 - 賣五（元）/手。
Web
service的方法類似於現在concurrent項目的DBWS數據的獲取，都是通過SOAP協議向DBWS伺服器獲取相關的數據。
利用雅虎查中國股票
http://quote.yahoo.com/d/quotes.csv?s=MSFT&f=slc1wop
返回微軟的股票價格
"MSFT","4:00pm
- 30.70",+1.04,"21.46 -
30.75",29.77,29.66
http://quote.yahoo.com/d/quotes.csv?s=000969.SZ&f=slc1wop
這個返回安泰科技的，一般有半個小時的延遲。
但是s=000969.sz
這個後面的sz是深圳的意思, 滬市是SS後綴