OmegaChartスレ ver.11

**名無しさん＠お腹いっぱい。** · 2019/02/10(日) 15:10:46.51

無尽蔵データ読み込み時におけるデータ欠落について。

ファイル：Mujinzou.cs
クラス：internal class MujinzouDataSource : DailyDataSource
メソッド：private Hashtable FillData(int date)
行：９３行（if(br!=null &&）の直前に以下の行を追加して無尽蔵のデータを更新してみてください。

//<<-- add for debug
if (br != null && !CheckMarket(br, Util.ParseInt(t[2], 0)) && !br.Obsolete) {
File.AppendAllText(Path.Combine(Env.GetAppDir(), "DownloadError.csv"),
string.Format("無尽蔵,市場不一致,{0},{1},{2},{3},{4}\r\n",
date, br.Code, br.Name, br.Market, line.Replace(",", "\t")), Encoding.Default);
}//-->>

index.txtと市場不一致のために取りこぼされた銘柄がcsvに出力されます。

また、取得先urlを"http://souba-data.com/k_data/"; + d2.ToString(@"yyyy/yy_MM/TyyMMdd")に変更（無尽蔵ページ過去データの取得先）すると複数市場への重複上場のデータがダウンロードされます。
このメソッドに前行のコードを新たな変数にセットして、前行で市場不一致であっても次の行で合致すれば成功と出力するようにコードを変更すれば、大幅に取りこぼしが減るようです。

しかし、これでもマザーズないしジャスダックと東証で市場の入力ミスがあるようで取りこぼしが発生します。
一つの案としては、url変更に加えて３番目の列ではなく最終列の市場名でチェックするようにロジック変更することでかなり防げるような気がしています。
あるいは、エラーの銘柄だけ他のデータソースをチェックしに行くという方法も考えられます。

無尽蔵の場合はデータ更新時間が短いのが利点ですが、このほかにも時々日経平均が更新されないことが原因かもしれませんが、たまにスクリーニング結果でペインが表示されない不具合が出現するような気がしています。

**名無しさん＠お腹いっぱい。** · 2019/02/10(日) 20:21:45.88

Edatalabもチェックしてみました。

ファイル：Edatalab.cs
クラス：internal class EdatalabDataSource : DailyDataSource
メソッド：private Dictionary<int, NewDailyData> FillData(int date)
行番号：74
continue;
を以下に変更
{
File.AppendAllText(Path.Combine(Env.GetAppDir(), "DownloadError.csv"),
string.Format("Edatalab,市場不一致,{0},{1},{2},{3},{4}\r\n",
date, br.Code, br.Name, br.Market, line.Replace(",", "_")), Encoding.Default);
continue;}

また、メソッド最後の「return;」の前に以下を追加するとindex.textとビルトインコードで更新されなかったコード一覧がエラーログに追加されます。

foreach (AbstractBrand brand in Env.BrandCollection.Values) {
if (brand.IsBuiltIn | brand.IsCommodity | brand.IsDomesticIndex | brand.IsForeignIndex |
brand.IsIndexFuture | brand.IsSectorIndex || !(brand as BasicBrand).Obsolete) {
if (!result.ContainsKey(brand.Code) && brand.Market != MarketType.Custom) {
File.AppendAllText(Path.Combine(Env.GetAppDir(), "DownloadError.csv"),
string.Format("Edatalab,追加不能,{0},{1},{2},{3}\r\n",
date, brand.Code, brand.Name, brand.Market), Encoding.Default); } } }

Edatalabにもコードの不一致が数件あり取りこぼしているようです。
Edatalabは東証、マザーズ、ジャスダックのみを対象にしているようですからマーケットチェックは必要ないような気がしました。

**名無しさん＠お腹いっぱい。** · 2019/02/11(月) 06:46:08.29

データの取りこぼしはどこでも少なからず起きている様です銘柄の特定が出来ればその対処に役立ちます
今は別スクリプトを利用したりブックマークに取り込み 1銘柄だけの更新機能を利用させて頂いていまが
CSVファイルを使った更新等々色々改善が期待できるところがありそうです

**名無しさん＠お腹いっぱい。** · 2019/02/11(月) 11:51:21.64

>>222
CSVファイルをドラッグドロップしてOmegaChartのデータ更新する機能のサンプルコード。
２つの仕様変更を盛り込んでみました。

・信用残データが残る仕様に変更。信用残の項目は、書き込み対象にも比較対象にもならないのは従来通り。
・ドロップするＣＳＶファイル名が数字４桁だったら、その数字の銘柄データとして扱う。存在しないコードだったら表示画面の銘柄として扱う。

**名無しさん＠お腹いっぱい。** · 2019/02/11(月) 11:53:08.60

>>247
2019.2.11の修正で変更が必要になるのはData.csとImport.cs。MainFrame.csは変更なし。

OmegaChart ファイルをドロップしてデータ更新 Data.cs 追加する部分には//☆DataImporter 20190211
https://osdn.net/users/omegachartuser/pastebin/6061
OmegaChart ファイルをドロップしてデータ更新 Import.cs 差し替えその１新規追加ファイル
https://osdn.net/users/omegachartuser/pastebin/6062

**名無しさん＠お腹いっぱい。** · 2019/02/11(月) 13:37:44.39

>>244 無尽蔵はそもそも銘柄の市場が間違っているところがちょこちょこありませんか？

>>248 どうもありがとうございます。

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 06:30:34.38

>> 247, 248
223 << です当方の勝手な要望を聞いて頂き有り難うございます
ただ相当な御迷惑をお掛けした様子が窺えます安易な書き込みには気をつけます

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 21:54:56.67

>>244
無尽蔵データの当日株価と過去株価についてもう少し詳しく調べるコンソールアプリを作成してみました。

d_dataの方が当日、k_dataの方が過去株価のようです。
OmegaChartで取得する当日株価の方が市場、0データ、銘柄の重複を含め間違いが多いような気がします。
また、過去株価でも市場と無尽蔵独自の市場コードや銘柄名などで間違いがあるようですが、市場名のフィールドに関しては１部と２部あるいは2部とマザーズの間違いがほとんどのようでした。

データインポートには過去株価の方が良さそうに思えますが、コード変更が多くなってしまうでしょう。
index.txtを更新せずに市場変更があった場合には、データダウンロードで市場チェックをしていると取りこぼしの原因になると考えられます。
信頼性に欠ける面はありますから、素直に他のデータソースを使えということになりますかね。
Edatalabを市場チェックせずに利用するのが一番早くて簡単かもしれません。

ちなみに、ヤフーがデータソースの場合は優先市場の取得で市場チェックしていないのでindex.txtにあるコードは更新されるようです。
ところで、昔のヤフー時系列は前日分までだったと記憶していたのですが今見てみたら今日のデータも追加されているのですね。

検証したコンソールアプリを次に参考として投稿しておきます。
適当に日付を変更して、Omegaのディレクトリを変更する必要があります。
新規作成したコンソールアプリのメインメソッドに貼り付けてください。
zipファイルをHttpClientでStream取得して直接読み込むため、System.IO.Commpressionの参照が必要です。

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 21:58:37.03

//>>251 Mujinzou.cs 1
//新規にコンソールアプリを作成、要参照追加 System.IO.Compressionの参照追加して以下をメインにコピペ
//dateを適当に変更して実行＊ウンロードできなければエラーとなる
DateTime date = DateTime.Parse("2019/2/12");
string[] urls = new string[] {
"http://souba-data.com/d_data/"; + date.ToString(@"yyyy\d/yy_MM\d/TyyMMdd") + ".zip",
"http://souba-data.com/k_data/"; + date.ToString(@"yyyy/yy_MM/TyyMMdd") + ".zip"　};
string[] sources = new string[2] { null, null };
using (System.Net.Http.HttpClient client = new System.Net.Http.HttpClient()) {
for (int i=0;i<2;i++) {
using (var zipStream = client.GetStreamAsync(urls[i]).Result) {
using (System.IO.Compression.ZipArchive archive = new System.IO.Compression.ZipArchive(zipStream)) {
using (System.IO.StreamReader reader = new System.IO.StreamReader(archive.Entries[0].Open(),
System.Text.Encoding.Default)) {
sources[i] = reader.ReadToEnd();
System.IO.File.WriteAllText((i == 0 ? "t" : "k") + archive.Entries[0].Name, sources[i], Encoding.Default);
} } } } }
Dictionary<int, string[]> dicIndexMarket = new Dictionary<int, string[]>();
string indexfile = @"Z:\data\trade\OmegaChart\index.txt";
string[] lines = System.IO.File.ReadAllLines(indexfile, Encoding.Default);
foreach (string line in lines) {
string[] cols = line.Split(',');
if (cols.Contains("OBS"))
continue;
if (int.TryParse(cols[0], out int code)) {
dicIndexMarket.Add(code, new string[]{cols[1], cols[2],
cols[2].Replace("T1","東証１部").Replace("T2","東証２部").Replace("J","ＪＡＱ").Replace("M","東証マ") });
} }

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 22:05:53.80

//>>251 Mujinzou.cs 2
SortedDictionary<int, string> dic = new SortedDictionary<int, string>();
lines = sources[0].Replace("\r", "").Split('\n');
foreach (string line in lines) {
if (line.Trim() == "") continue;
string[] cols = line.Split(',');
int code = int.Parse(cols[1]);
if (dic.ContainsKey(code)) {
Console.WriteLine("当日株価データに重複して存在しています {0}", code);
Console.WriteLine("　新 :{0}", line);
Console.WriteLine("　既存:{0}", dic[code]);
continue; }
dic.Add(code, line); }
Console.WriteLine("\r\nindex.txtのOBS以外で銘柄当日株価に銘柄コードが見当たらないもの");
foreach (int code in dicIndexMarket.Keys) {
if (!dic.ContainsKey(code))
Console.WriteLine("　{0} {1} {2}", code, dicIndexMarket[code][1], dicIndexMarket[code][0]); }
Console.WriteLine("\r\nindex.txtに存在しない当日株価の銘柄");
foreach (var pair in dic) {
if (pair.Key > 1300 && !dicIndexMarket.ContainsKey(pair.Key))
Console.WriteLine("　{0}", pair.Value); }
lines = sources[1].Replace("\r", "").Split('\n');
Dictionary<int, List<string[]>> dicPast = new Dictionary<int, List<string[]>>();
for (int i = 0; i < lines.Length; i++) {
if (lines[i].Trim() == "") continue;
string[] cols = lines[i].Split(',');
int code = int.Parse(cols[01]);
if (dicPast.ContainsKey(code)) {
List<string[]> list = dicPast[code];
list.Add(cols);
dicPast[code] = list; }
else dicPast.Add(code, new List<string[]> { cols }); }

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 22:08:52.25

//>>251 Mujinzou.cs 3
Console.WriteLine("\r\nindex.txtと市場が異なる当日株価の銘柄");
foreach (var pair in dic) {
string[] cols = pair.Value.Split(',');
if (dicIndexMarket.ContainsKey(pair.Key) && cols[9] != dicIndexMarket[pair.Key][2]) {
StringBuilder sb2 = new StringBuilder();
if (!dicPast.ContainsKey(pair.Key))
sb2.Append("該当銘柄なし");
else {
foreach (string[] cols2 in dicPast[pair.Key]) {
if (cols2[9] == dicIndexMarket[pair.Key][2]) {
sb2.Clear();
sb2.Append("[一致]");
sb2.Append(string.Join(",", cols2));
break; }
else
sb2.Append(cols2[9] + ","); } }
if (!sb2.ToString().Contains("[一致]")) {
sb2.Remove(sb2.Length - 1, 1);
sb2.Append("（一致せず）"); }
Console.WriteLine("　{0} omega[{1,-2}] 当日株価:({3}){2} \t過去:{4}\t{5}",
pair.Key, dicIndexMarket[pair.Key][1], cols[9], cols[2], sb2.ToString(), dicIndexMarket[pair.Key][0]); } }
Console.WriteLine("\r\n過去株価に存在するが当日株価には存在しない銘柄コード");
for (int i = 0; i < lines.Length; i++) {
if (lines[i].Trim() == "") continue;
int code = int.Parse(lines[i].Split(',')[1]);
if (!dic.ContainsKey(code))
Console.WriteLine("　{0}", lines[i]); }

**名無しさん＠お腹いっぱい。** · 2019/02/12(火) 22:09:45.24

//>>251 Mujinzou.cs 4
Console.WriteLine("\r\n過去株価と当日株価の内容が異なるもの");
int prevcode = 0;
StringBuilder sb = new StringBuilder();
for (int i=0;i<lines.Length;i++) {
if (lines[i].Trim() == "")
continue;
int code = int.Parse(lines[i].Split(',')[1]);
if (!dic.ContainsKey(code))
continue;
if (code != prevcode) {
if (sb.Length > 0 && !sb.ToString().Contains("当日株価に一致"))
Console.WriteLine(sb.ToString());
sb.Clear(); }
//過去株価では名証が名古となっている
if (lines[i].Replace(",名古",",名証") != dic[code]) {
if (code != prevcode) {
sb.AppendFormat("　当日株価：{0}\r\n", dic[code]);
sb.AppendFormat("　過去株価：{0}\r\n", lines[i]); }
else
sb.AppendFormat("　過去株価：{0}\r\n", lines[i]); }
else if(code == prevcode) {
sb.AppendFormat("　過去株価：{0} 当日株価に一致", lines[i]); }
prevcode = code; }
Console.WriteLine("hit any key then quit");
Console.ReadKey();

**名無しさん＠お腹いっぱい。** · 2019/02/13(水) 07:47:39.40

>>251 2/12の無尽蔵当日（OmegaChartがダウンロードする）ファイルで４本値が間違っているもの一覧
いずれも過去ファイルには出来高ありますが、当日には出来高なしで要注意。

　当日：2019/2/12,9793,11,9793 ダイセキ,0,0,0,0,0,東証１部
　過去：2019/2/12,9793,31,9793 ダイセキ,0,0,0,0,0,名古１部
　過去：2019/2/12,9793,11,9793 ダイセキ,2578,2636,2576,2624,96700,東証１部

　当日：2019/2/12,9900,11,9900 サガミ,0,0,0,0,0,東証１部
　過去：2019/2/12,9900,31,9900 サガミ,0,0,0,0,0,名古１部
　過去：2019/2/12,9900,11,9900 サガミ,1325,1334,1318,1324,36000,東証１部

　当日：2019/2/12,9956,11,9956 バロー,0,0,0,0,0,東証１部
　過去：2019/2/12,9956,31,9956 バロー,0,0,0,0,0,名古１部
　過去：2019/2/12,9956,11,9956 バロー,2656,2749,2635,2748,244300,東証１部

　当日：2019/2/12,9966,11,9966 藤久,0,0,0,0,0,東証１部
　過去：2019/2/12,9966,31,9966 藤久,0,0,0,0,0,名古１部
　過去：2019/2/12,9966,11,9966 藤久,743,747,742,743,2200,東証１部

　当日：2019/2/12,9969,12,9969 ショクブン,0,0,0,0,0,東証２部
　過去：2019/2/12,9969,32,9969 ショクブン,0,0,0,0,0,名証セ
　過去：2019/2/12,9969,12,9969 ショクブン,227,235,220,233,119300,東証２部

　当日：2019/2/12,9982,11,9982 タキヒヨー,0,0,0,0,0,東証１部
　過去：2019/2/12,9982,31,9982 タキヒヨー,0,0,0,0,0,名古２部
　過去：2019/2/12,9982,11,9982 タキヒヨー,1771,1793,1764,1787,8900,東証１部

　当日：2019/2/12,9987,11,9987 スズケン,0,0,0,0,0,東証１部
　過去：2019/2/12,9987,31,9987 スズケン,0,0,0,0,0,名古２部
　過去：2019/2/12,9987,11,9987 スズケン,5650,5860,5620,5830,367700,東証１部

**名無しさん＠お腹いっぱい。** · 2019/02/13(水) 12:03:56.19

どうもありがとうございます。

**名無しさん＠お腹いっぱい。** · 2019/02/13(水) 19:35:35.81

>>245
１月以降を見た限りではEdataLabには市場番号の間違い以外にも、一部データに抜けがありました。
しかし、この抜けはよく見てみると取引のなかった銘柄がファイルに含まない仕様が原因と思われました。
これ以外はBrandCollectionに存在する上場廃止以外の個別銘柄の全てが含まれている様です。

自分はこれまで取引のない場合は0埋めで利用していたので、この場合は出来高0のTradeDataを追加して利用してみようかと考えています。

４本値自体が正確かどうかまでは面倒なので調べていません。

**名無しさん＠お腹いっぱい。** · 2019/02/14(木) 08:42:53.40

データダウンロード元ごとにセレクトできる機能もあったら便利かもしれないですね。

**名無しさん＠お腹いっぱい。** · 2019/02/16(土) 12:42:29.96

>>258 いろいろと精査、ありがとうございます。

**名無しさん＠お腹いっぱい。** · 2019/02/16(土) 23:46:30.48

無尽蔵、2/12の当日データ。 2503キリンHが２つあるね。

**名無しさん＠お腹いっぱい。** · 2019/02/17(日) 06:36:08.93

それはコードの25030と25035との2つが切り詰められたせい

**名無しさん＠お腹いっぱい。** · 2019/02/17(日) 16:10:01.42

無尽蔵当日の方は銘柄コードに対してユニークでなければならないはずと思ってたんだけど、
Mujinzou.csの中で、株価を格納するのがHashtableで、これって重複したキーのデータを取り込む時は上書きするようで、ちょっと感動した。

**名無しさん＠お腹いっぱい。** · 2019/02/19(火) 13:19:28.12

OmegaChartも随分良くなったがある意味クレクレのおかげでもあるな

**名無しさん＠お腹いっぱい。** · 2019/02/21(木) 15:09:50.20

ああちょうせんぼうえいだいじん

**名無しさん＠お腹いっぱい。** · 2019/02/22(金) 11:38:37.58

資産300億オーバー
国内44歳以下専業トレーダー首位のBNF氏も
Omegachartで800から1000のチャートを記憶していました

**名無しさん＠お腹いっぱい。** · 2019/02/22(金) 12:25:28.35

BNFがomega使うかよ無知

**名無しさん＠お腹いっぱい。** · 2019/02/22(金) 20:00:13.81

2005年あたりのチャート環境は、Fchartか、OmegaChartかって感じだった。あんまり選択肢なかったな。
Alfaチャートという、いまいちなチャートから乗り換えて、その使用感と拡張性に感動したのがOmegaChartだった。

**名無しさん＠お腹いっぱい。** · 2019/02/23(土) 06:46:45.73

ブィーエヌエフでーす Omegachartの使い方教えましょか

**名無しさん＠お腹いっぱい。** · 2019/02/24(日) 07:52:42.82

アホ～何かくれてやろか

**名無しさん＠お腹いっぱい。** · 2019/02/25(月) 08:09:45.69

おぉうそんなに利口ならアレくれアレを

**名無しさん＠お腹いっぱい。** · 2019/02/27(水) 17:07:40.85

アレて何ですか

**名無しさん＠お腹いっぱい。** · 2019/02/27(水) 20:34:14.93

無尽蔵さんで2月20日データ抜けが少しあるようですが
6573，6618、9272、、、まだありそうですかね

**名無しさん＠お腹いっぱい。** · 2019/02/27(水) 21:39:11.96

今確認したら、その３つとも取れてますね・・・

**名無しさん＠お腹いっぱい。** · 2019/02/28(木) 08:16:42.13

>>273
JPXの日報PDFと無尽蔵を比較しました。
4本値の異常　9793,9900,9956,9966,9969,9982,9987
無尽蔵に存在しない日報銘柄（PROMarket除く） 25935,1475,1476,1477,1478,1654,1773,8686,9399,6697,4875
外国銘柄も含まれています

なぜかとは25935以外は一致している様です

**名無しさん＠お腹いっぱい。** · 2019/03/01(金) 20:03:36.49

確認ありがとうございます。
なぜかうちの子は抜け分をDLできないらしいですね。

**名無しさん＠お腹いっぱい。** · 2019/03/02(土) 00:24:15.09

>>276
2/20に限って調べると、無尽蔵3列目の市場番号と10列目の市場名が一致しない銘柄がいくつかあります
（11:T1 12:T2 13:M 91:J 31-33:名古屋）
code 市場番号市場名銘柄名 index.txt
1439 13 ＪＡＱ安江工務店 J
1464 12 東証１部大和J400ダブル T1
3349 12 東証１部コスモス薬品 T1
3419 13 名証セアートグリーンなし
5704 13 東証ＭＪＭＣ M
6178 13 東証１部日本郵政 T1
6190 13 ＪＡＱフェニックス M
9279 11 東証マギフト M

Mujinzou.csのCheckMarketのロジックを見る限りでは、5704のJMC以外は取りこぼしていると思います。

対策１　129行からの「CheckMarket」の一部を変更
case MarketType.T1:
return muj == 11 || muj == 12 || muj == 13;
case MarketType.M:
return muj == 21 || muj == 13 || muj == 11;
case MarketType.J:
return muj == 91 || muj == 13;
ただし、これ以外の日に市場番号に別の間違いがあれば取りこぼすと思います。

対策２　93行を以下に変更（市場チェックしない）
if(br!=null) {

4本値の間違いに関しては、他のデータソースを利用するしかないと思われます。

**名無しさん＠お腹いっぱい。** · 2019/03/02(土) 00:39:33.71

>>277 追記
列10の市場名とJPXの日報の市場が一致しない銘柄（ETF、出資証券など除く）もリストアップしてみました

code JPX市場名無尽蔵市場名銘柄名 index.txt
3131 JASDAQスタンダード銘柄東証マシンデンハイ　J
3143 市場第二部東証マオーウイル　 T2
3350 JASDAQスタンダード銘柄東証１部レッドプラネット J
3560 JASDAQスタンダード銘柄東証マほぼ日　　J
3571 市場第一部東証２部ソトー　 T1
3671 マザーズ銘柄東証１部ソフトマックス M
3810 市場第二部東証マサイバステ T2
4033 市場第一部東証２部日東エフシー T1
6045 マザーズ銘柄東証２部レントラックス M
6190 マザーズ銘柄ＪＡＱフェニックス M
6698 市場第二部東証マヴィスコテク T2
7805 JASDAQスタンダード銘柄東証マＭＴＧ J
7806 マザーズ銘柄ＪＡＱプリントネット M
9275 市場第二部東証マナルミヤイン T2
9658 市場第一部東証２部ビジ太田昭 T1

これらも一部は取り込められていないと思われます。

なお、7805と7806の銘柄名は逆のようです
ダウンロードせずにプログラムでチェックしているので、目視で確認まではしていません。
もしかするとこちらのプログラムミスかもしれません。

**名無しさん＠お腹いっぱい。** · 2019/03/02(土) 10:02:42.57

どうもありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/03/04(月) 13:18:44.35

まだ DreamVisor から業種別指数取れますねサンプルコードを使わせてもらって○探から個別株と業種別指数は取れる様になった
しかしC#が駄目な上に手抜きの小細工なので_codeQueue.EnqueueにSI_FISHINGなどをを書き足すだけちょっと恥ずかしい
33個もあればせめてループさせたいがC#の素人ではソースがよく分からずに困っています Mujinzouからのダウンロードにも対応させるには
多分DowloadOrderの書き換えがいるんだろうが全くの力不足で時間がかかりそうせめて最初のループの所だけでもなんとかしたい
どなたかヒントだけでも結構ですので御教示お願い出来ませんか

**名無しさん＠お腹いっぱい。** · 2019/03/04(月) 22:19:50.48

>>280
現在取得できていて分かりやすければそれでいいと思いますが。

今後のプログラミングの勉強としてforループの例をアドバイスすると、.Enqueueの場所で
for(int code=(int)BuiltInIndex.SI_FISHING;code<=(int)BuiltInIndex.SI_SERVICE;code++)
_codeQueue.Enqueue(code);
と書くことで33業種をまとめて追加できると思います。

また、ウェブページをダウンロードするメソッド内にも、
if(code >= (int)BuiltInIndex.SI_FISHING & code<=(int)BuiltInIndex.SI_SERVICE)
code = [ウェブページの水産コード番号] + code - (int)BuiltInIndex.SI_FISHING;
とするとコードが短くなると思います。
＊当然ウェブページのコード番号が連番でなければなりません。

考えたままに書き込んでいるので間違いがあるかもしれません。

**名無しさん＠お腹いっぱい。** · 2019/03/04(月) 22:27:07.30

これで行けないですかね？

for(int i = 501;i<=533;i++)
{
_codeQueue.Enqueue(i);
}

**名無しさん＠お腹いっぱい。** · 2019/03/04(月) 23:35:40.08

>>280

個別銘柄をEdatalabまたは無尽蔵で、指標関連をYahooまたは○探からダウンロードしようと考えているのであれば、ある程度大幅にコードの変更が必要です。
データソースとして選択可能な無尽蔵、Edatalab、Yahooに関してはMarketType.B等以外の個別銘柄を全てダウンロードする仕様のはずです。
DreamVisorは指標のダウンロードでクラスの構造が異なるからです。

一つ思いついたのは、Yahooを例にとると銘柄をパラメーターとして渡せるコンストラクターを追加します
public YahooDataSource(int[] dates, int[] codes) : base(dates) {
foreach (AbstractBrand brand in Env.BrandCollection.Values) {
if (Array.IndexOf(codes, brand.Code) < 0)
continue;
...
こちらのコンストラクターを使った場合、指定したコードだけダウンロードするはずです。

ダウンロードダイアログが押されると呼ばれる、DownloadOrder.csの１２８行からのConvertToDataSourceを変更します。
まずDreamVisor関連をコメントアウト
System.Collections.Generic.List<int> list = new System.Collections.Generic.List<int>();を宣言して
通常版のifを利用して_sectorsその他のindex関連が選択されている場合に、listにコードを追加します。

StockDownload stock_index = new new Specialized.YahooDataSource(_dateArray, list.ToArray());
これをswitchの前かブロック終了後に追加することで、追加したコードのページがあればYahooでダウンロードすると思います。

試していないので確信はありませんが、参考まで。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 00:40:36.90

ダウンロード違法化拡大となると、無尽蔵やなぜかなどのデータソースの利用はためらってしまう。
Yahooもスクレイピングを禁止しているし。

KABU+やトレステが無難かな。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 06:10:34.29

>>281,282,283
御回答頂きありがとうございましたもしやと思い501から533まで試しに回してみたら行けましたね
大ぴっらにするには問題も結構ありそうなのでご意見を参考にして個人的にトライしてみます

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 08:09:16.55

違法ダウンロード対策として

101と日経ジャスダック平均などは日経プロファイルでcsv（1年分）から取得（日経PERのヒストリカルもある）
TOPIX、業種、マザーズなどはJPXの指標で（jsonファイル　最新＋過去5日分）
個別銘柄はJPX日報pdfからインポート（翌営業日）
当日引け後にチャートを見る場合は、JPXの株価検索で時系列ダウンロードも可能ではある

著作権元の許可なくアップロードされているものではなく、著作権を主張している発信元が公開しているデータを利用して、データを公開せずに個人利用にとどめれば違法ダウンロードの問題はクリアできそうな気がする。

データの蓄積、改造に該当すると指摘されて問題になるかもしれないが

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 11:50:11.27

株価に著作権があるかどうかは、ちょっと疑問に思ってる者ですが、ヤフーなどサイトのレイアウトにはそういうものがあるのでしょうから、それを複製したらアウトになるというのは理解できます。
東証は手数料欲しさに、株価に著作権があるかのように振舞ってるだけじゃないかと思ってます。ちなみに、なぜかの元ネタはＲＳＳです。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 16:32:26.82

任意のローソク足のところでルーラーを止めておくことが出来るようにファイル改造できないですか?

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 17:31:38.33

>>288
日付固定機能というサンプルコードがあります。
https://egg.5ch.net/test/read.cgi/software/1488866170/688

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 17:47:26.67

>>288
ダブルクリックで水平線を描く機能がなくてもいいのならば

ChartCanvas.csを右クリックからコードの表示

OnDoubleClick内
510行　var ev = ...
511行　_currentFreeLine = ...
の２行をコメントアウト
513行　DoubleClickイベントの前に
private bool fixDate;
を追加
コメントアウトした511行の次に
fixDat = !fixDate;
を追加

OnMouseMove イベント内の
317行　int id = ...
349行　}
までのブロックを、
if(!fixDate){
317行
349行
}
で囲む

これで、ダブルクリックするごとに日付の固定と解除が切りかわるはずです。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 17:51:50.17

>>290
入力ミスありました
fixDate = !fixDate;
が正解です。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 18:02:05.58

>>241
>>242
Fibonacciラインのファイル更新、何度も何度もありがとうございます。
試用させて頂きましたて、どうしても分からなかったので質問させて下さい。

最新のファイルでは、1.618や、--1.618を描画する場合。
安値から高値方向にFibonacciを引いた場合も、逆に、高値から安値の方向に引いた場合も、0.618などFibonacci目盛りや符号を上下反転させる仕様を廃止されたのでしょうか。

それと、Fibonacciラインの特徴は。
仮に、目盛りや目盛りの符号を上下反転させる仕様で使うにしても。(一つ前のファイルバージョンまでの仕様のように)
Fibonacciラインを引き直したとき、高値位置を動かすと安値から高値方向に引いた場合の目盛りの表示に戻ってしまい。
逆に、安値の位置を動かすと高値から安値の方向に引いた場合の目盛りの表示に戻ってしまうのは。
これは以前のご説明にあった、引き直したFibonacciラインにはコピー元のFibonacciラインとの区別が無くなってしまうので仕方がない、という理解でよろしいですか。

お手数ですがどのように工夫して利用できるのか考えてみるための参考としたいので。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 18:16:28.10

>>287
自分も著作物？と言われると違和感が非常に強いです。
判例もないようですし、法律に詳しくないので良くわかりません。
だからと言って、個人的にJPXと戦ってまでOmegaChartを利用する覚悟もないのです。

よっぽどのことがなければ、ダウンロードがバレて違法性を問われることはないだろうと思ってはいますが、小心者なもので。

一つ質問ですが、なぜかの日経平均の出来高は１桁落としているようですが、オーバーフロー対策ですかね。
日経プロファイルには残念ながら出来高がないので欲しいところです。

ウェブにOmegaのバイナリデーターを置いてクラウドのようにOmegaChartで直接アクセスした場合の動作はどうなんだろうと妄想しています。
チャート表示はさほど遅くならなくてもスクリーニングなどは遅くて使い物にならないかもしれませんね。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 18:52:21.24

著作権法（定義）第二条十の三に該当する様ですね
データベース、論文、数値、図形その他の情報の集合物であつて、それらの情報を電子計算機を用いて検索することができるように体系的に構成したものをいう

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 19:02:08.52

>>293
＞日経平均の出来高
仰る通りで、オーバーフロー対策で桁を落としました。ＲＳＳの素データだと、万株単位です。
これを10000倍すると、intの最大値を超えることもありそうなので1000倍にとどめました。

＞Omegaのバイナリデータ
GoogleのFirebaseとか使って何かできないかと思っています。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 19:12:58.63

>>295
わかりました。
ありがとうございます。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 19:15:28.65

>>290
これはすごい。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 20:03:12.18

>>292
確かにおかしな表示になってましたね。下のファイルの修正だと並びは問題ないはずです。
変更箇所は561行目からのretText()だけ。

OmegaChart Fibonacciリトレースメント Fibonacci.cs 新規追加 ※差し替えその９修正ポイントには //☆Fibonacci 20190207
https://osdn.net/users/omegachartuser/pastebin/6077

気づいてしまったんですが、フリーラインが何も引かれていない状態で、フィボナッチラインを引いても保存されないというバグがありました。
明日の作戦会議をしないといけないので、プログラムに関してはまた今度にしたいと思います。

**名無しさん＠お腹いっぱい。** · 2019/03/05(火) 22:19:46.79

>>290
これ、チャート右クリックしてダイアログ表示、「ルーラーの固定」をクリックでこの機能を実行。
解除は、画面のどこかをクリックしたら解除って流れにしたら、すごい良さそう。
チャート画面スクショを保存するときに使える。

**名無しさん＠お腹いっぱい。** · 2019/03/06(水) 06:44:30.67

>>299

Env.cs
1 [STAThread] 137行の前に行を追加
public static bool FixDate { get; set; }

Command.cs
2 //その他 111行の前に以下を追加
FixDate,
3 //その他 288行の前に以下3行を追加
case CID.FixDate:
Env.FixDate = true;
return CommandResult.Succeeded;
4 //その他 408行の前に以下を追加
AddCommand(CID.FixDate, "日付ルーラー固定", keys, Keys.None);

MainFrame.cs
5 private ZMainMenuItem _menuMove; 78行の前に以下の変数追加
private ZMenuItem _menuFixDate;
6 this._menuMove = ... 236行の前に以下の行を追加
this._menuFixDate = new ZMenuItem();
7 397行のthis._menuLinkToInfoの後に以下を挿入
, this._menuFixDate
8 // _menuMove 512行の1行前に以下の4行を追加
this._menuFixDate.Index = 12;
this._menuFixDate.Text = "日付ルーラーの固定";
this._menuFixDate.Click += new System.EventHandler(this.OnMenu);
this._menuFixDate.CID = CID.FixDate;

**名無しさん＠お腹いっぱい。** · 2019/03/06(水) 06:45:23.42

>>300

ChartCanvas.cs
9 OnMouseMove イベント　317行から349行までを以下で囲む
if(!Env.FixDate){ 317行から349行まで}

10 OnMouseDown イベント　487行から
490行 if(e.Button==... の前に　以下の2行を追加
if (Env.FixDate)
Env.FixDate = false;

*ダブルクリックで固定の編集済みの場合は
追加した変数　private bool fixDate; をコメントアウト
OnDoubleClick内のコメントアウトを戻して
fixDate = !fixDate;をコメントアウトしてください

**名無しさん＠お腹いっぱい。** · 2019/03/06(水) 07:31:59.67

>>300
仕事早いですね　ｂ
このコード、ここでまとめてしまっても構わないでしょうか？
https://osdn.net/projects/omegachartusers/wiki/FrontPage

**名無しさん＠お腹いっぱい。** · 2019/03/06(水) 08:09:08.21

>>302

OKです。
著作権も主張しません。

**名無しさん＠お腹いっぱい。** · 2019/03/06(水) 08:09:56.71

>>303
ありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 11:16:07.49

>>283
DreamVisor の終了対応で ...DataVariousSource を導入されましたがこのコンストラクターを使えば重複気味のコードがすっきりしませんか
いつもお手数をお掛けして申し訳ありませんが一寸ためしにやってみたいのですがコードの続きをあげて頂けると助かります

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 13:15:50.28

どうもありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 15:10:16.37

>>289
>>290
ありがとうございます!
やってみます!

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 18:09:41.86

>>307
>>303さん考案の「任意のローソク足でルーラーを止める」機能をまとめました。
https://osdn.net/projects/omegachartusers/wiki/FrontPage

通常カーソルを動かすとルーラーも追従するが、これを任意のローソク足の上で固定する機能。
固定したいローソク足の上で右クリック。表示されるダイアログから、「日付ルーラーの固定」クリックでルーラーが止まる。
解除するときは、画面のどこかをクリックする。

OmegaChart 任意のローソク足でルーラーを止める ChartCanvas.cs 追加・修正ポイントには//☆FixDate
https://osdn.net/users/omegachartuser/pastebin/6080
OmegaChart 任意のローソク足でルーラーを止める Command.cs 追加・修正ポイントには//☆FixDate
https://osdn.net/users/omegachartuser/pastebin/6081
OmegaChart 任意のローソク足でルーラーを止める Env.cs 追加・修正ポイントには//☆FixDate
https://osdn.net/users/omegachartuser/pastebin/6082
OmegaChart 任意のローソク足でルーラーを止める MainFrame.cs 追加・修正ポイントには//☆FixDate
https://osdn.net/users/omegachartuser/pastebin/6083

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 21:49:57.77

>>305
あくまで思いつきを提案しただけで、実際に試しているわけではなくうまくいかない可能性もある事を了承して下さい。

また、ウェブページをループで巡回する場合プログラムミスから存在しないURLリクエストや無限ループ等でサーバーに短時間でリクエストを繰り返して、重大な損害を与えてしまうことも考えられます。
場合によっては損害賠償などを請求される場合もありうる事を覚悟のうえで（定かではありませんが、何処かで見たような記憶があります）、
デバッグモードで各所にブレークポイントを置いて進行状況を確認しながらやるなどして、プログラミングに自信がなければ安易に手を出さない方が無難です。
また、ウェブページの構造が変更された場合（外観は一見同じであっても）自力で修正が必要になりますから、正規表現などについての知識が絶対に必要です。
はっきり言うと、panacoranさんから正規の対応版が出るのを待つのが無難です。

今回は、○探で業種別指数がとれるとの事がきっかけですがその業種別指数のURLが分からないので、ヤフーのドル円を例に参考コードを書いて見ます。
もしかするとYahoo.cs個別銘柄の正規表現ではデータを取れないくてエラーになることがあるかもしれません。

＊　ヤフーはスクレイピング禁止を明示しています。自分は実際にデータが取れるか試したわけではなく、机上の空論です。
Yahooでのダウンロードを勧めているわけではなく、コードを変更して他のサイトで利用するための参考例として投稿するものです。

ダウンロードダイアログで為替にチェックを入れて、個別銘柄とともに201（ドル円）をダウンロードする事を想定しています。

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 21:51:22.51

>>309

Yahoo.cs
1 38行目のコンストラクターを以下のように変更（オリジナルをコメントアウトして）
public YahooDataSource(int[] dates, List<int> list = null) : base(dates)
2 42行目 Foreach ... { の次の行に　以下の２行を追加
if (!list.Contains(brand.Code))
continue;
3 GetPageに追加したコードで呼ばれた場合にヤフーのurlに変換するための変更が必要
tryの前の行（141行付近）に以下２行を追加
if (code == 201)
url = "https://stocks.finance.yahoo.co.jp/stocks/history/?code=USDJPY=X";;
＊　今回は例としてドル円のみ。Yahooの中に他の指標があるかは不明

DownloadOrder.csの変更
１　139行から143行をコメントアウトして以下に変更
System.Collections.Generic.List<int> list = new System.Collections.Generic.List<int>();
if (_currencies) {
list.AddRange(new int[] { 201 }); }
if (list.Count > 0) {
var ds = new Specialized.YahooDataSource(_dateArray, list);
col.Add(ds); }

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 22:10:52.41

>>310

注意
数日間のデータ取得を想定しています。
長期間のデータ取得はこれではできません。
２０本以上のデータを取得しようとした場合の挙動はわかりません。
オリジナルコードをよく見ていませんが、もしかすると無限ループになるかもしれません。

**名無しさん＠お腹いっぱい。** · 2019/03/07(木) 22:52:20.96

>>310

ミス発見

Yahoo.cs YahooDataSource 45行

if (brand.Market == MarketType.B || brand.Market == MarketType.Custom ||
を
if (brand.Market == MarketType.Custom ||
に変更

他にもあるかも

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 00:13:09.91

>>310

Yahoo.csのParsePageメソッドを見ると、200行でIndex判定をしていますが、
230行のIsIndex(int code)を見ると、日経とTOPIXだけをIndexと判定しています。
これであれば、データ保存する倍率が変わりデータ連続性がなくなるはずです。
指数判定コードの修正が必要です。

また、Yahoo.csのRun() を見ると、先にn225をデーターを取得しているようです。
これで有効な日付があればデーターを更新して、さらに追加したコード一覧_codesとTOPIXを読みに行くようです。

したがって、n225とtopixは他のデータソースも含め２度ダウンロードしてしまうことになりそうです。
確か、無尽蔵では上書きですが、
例えば、データソースをYahooに指定して為替のチェックを入れると問題を起こすかもしれません。

個別銘柄をダウンロードする際に、再び日経をダウンロードしますがこの時追加の日付がなくて個別に進まない可能性があるかもしれません。

パラメーターで渡したコードだけダウンロードするように変更するには、渡されたlistがnullかどうかをprivate のbool変数で保持して、
Run()の中で、listが渡された時には日経をスキップするようなコード変更が必要になります。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 00:38:19.57

>>313

データ倍率に関しては、IsIndexを呼び出す行200を、

AbstractBrand brand = Env.BrandCollection.FindBrand(code);
var shift = 1 / brand.PriceScale;

に変更すれば良いと思います。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 07:05:21.94

>>309-314

ご丁寧に教示して頂き有り難うございますちょっとした思いつきで回答を求めた形になりすみません
コードを見ると細かいところは色々違っているようで早とちりでした
海外や業種別指数（○..は251以降）等々は別途自前のプログラムで取得していますがチャート表示には
オメガが良いのでつい手抜きで本体からもダウンロード出来ればと思ってしまいます
この時代にスクレイピング規制はどうかなとは思いますが迷惑のかからない程度に抑えておきます

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 07:51:29.99

>>315

自前の外部プログラムを利用しているのですね、スクレイピング知識がないものと余計な注意を書いて申し訳ありませんでした。

自分も、Zanetti.DataSource.Specializedのクラスとスレッドの使い方に関しては難しくてよく理解できない部分も多々ありコンソールアプリ等で定期的にダウンロードとOmegaへのコンバートの方が簡単と思っています。

○..は251以降ですか。
omegachartuserさんのKabutan.csも先ほど見せてもらいましたが、Yahoo.csを忠実に移植されているように思えます。
正規表現が有効であれば、Kabutan.csも同じようにコンストラクターとGetPage他諸々を変更します。
ちなみにGetPageは行233以降はこんな感じですか。
else if(code>=(int)BuiltInIndex.SI_FISHING & code <= (int)BuiltInIndex.SI_SERVICE){
code -= (int)BuiltInIndex.SI_FISHING + 251;
}

DownloadOrder.csにはif(_currencies)の前あたりに以下を追加すればいいように思えます。
if (_sectors) {
for (int i = (int)BuiltInIndex.SI_FISHING; i <= (int)BuiltInIndex.SI_SERVICE; i++)
list.Add(i);
var ds = new Specialized.KabutanSource(_dateArray, list);
list.Clear();
}

多分、数カ所のデータソースを利用することも可能だろうと想像しています。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 08:08:02.02

>>316
○..は勿論頭に0がいりますがエキスパートの方に対して恐縮ですがGetPageのは最後に
以下を追加しています
else if (code >= (int)BuiltInIndexGroup.SectorIndexStart && code <= (int)BuiltInIndexGroup.SectorIndexEnd)
code = code - (int)BuiltInIndexGroup.SectorIndexStart + 251;

IsIndexにも同様に記述して指数倍率判定をクリヤーさせています
code >= (int)BuiltInIndexGroup.SectorIndexStart && code <= (int)BuiltInIndexGroup.SectorIndexEnd;

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 08:37:33.74

>>316

list.Clear();の前に以下が抜けていました。
col.Add(ds);

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 08:42:34.53

>>317
BuiltInIndexGroup.SectorIndexStartこちらの方がスッキリしてわかりやすいですね。
ありがとうございます。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 08:58:42.41

>>316
code -= (int)BuiltInIndex.SI_FISHING + 251;
はマイナスになってダメですね
>>317
を参考にしてください

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 11:47:12.55

>>310
Kabutan.csの修正と日経除外版

34行から
private bool _listOnly; //追加
public KabutanSource(int[] dates, List<int> list = null) : base(dates) { //変更
if (list != null)
_listOnly = true;
foreach (AbstractBrand brand in Env.BrandCollection.Values) {
if (list != null && !list.Contains(brand.Code)) //追加
continue; //追加
var basic = brand as BasicBrand;
if ( brand.Market == MarketType.Custom || //変更
basic == null || basic.Obsolete)
continue;
_codes.Add(brand.Code); } }

GetPageメソッド 233行に追加
else if(code>=(int)BuiltInIndexGroup.SectorIndexStart & code <= (int)BuiltInIndexGroup.SectorIndexEnd){
code += - (int)BuiltInIndexGroup.SectorIndexStart + 251; }

ParsePageメソッド　291行を変更
AbstractBrand brand = Env.BrandCollection.FindBrand(code);
var shift = 1 / brand.PriceScale;

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 11:49:01.41

>>321

Run()メソッド
66行（do {の次）から92行(var retry = 0;の前)までを以下でくくって変更
if (!_listOnly) { 66行 - 92行 }
else {
var n = Math.Min(DaysAtOnce, dates.Count);
var original = dates.GetRange(0, n);
dates.RemoveRange(0, n);
_series.Clear();
foreach (var date in original) {
_series.Add(date); }
if (_series.Count == 0)
return;
_codeQueue = new Queue<int>(_codes); }

ParsePageメソッド内で matches.Count == 0 となり、正規表現による日経平均の解析でエラーが出ました。
正規表現を変更してみたところデータを取得できました。

Run()の内部のコード変更はどうかなと思いますが、十分にロジックを理解していませんので興味ある方改良してください。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 12:47:32.59

さすがに速いですねこちらはゆっくり楽しんでコーディングにトライしてみます有り難うございました
89 << 言わずもがなと思い書きませんでしたが昨年の12月にほんのページの体裁が少し変わり正規表現の変更が必要になっていました

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 15:22:07.31

>>308
リビルド失敗しちゃうんですけど...

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 15:56:31.16

>>324
あら、失礼しました。ちょっと用事があるので、夜にでも直します。

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 18:34:14.58

>>325
よろしくお願いいたします<m(__)m>

**名無しさん＠お腹いっぱい。** · 2019/03/08(金) 19:21:20.21

>>324
こちらで再現しようとすると、エラーにならないんで、たぶん修正漏れかなと思います。
一番可能性が高いのはMainFrame.csのコメントアウトするところじゃないかと思いました。

MainFrame.cs
398行目だけに「//☆FixDate」と書いてますが、その前の行の行末をコメントアウトしているのも忘れずにお願いします。
this._menuLinkToInfo//});

ChartCanvas.cs
316行目からの if(!Env.FixDate)　のＩＦ文で囲むのはオリジナルのソース（4fee7d9）でいうと316行目から349行目です。

Command.cs
288行目のcase文は、この３行を挿入してください。
case CID.FixDate://☆FixDate
Env.FixDate = true;
return CommandResult.Succeeded;

**名無しさん＠お腹いっぱい。** · 2019/03/09(土) 10:03:50.92

>>324
すでに何かソースを修正済みだったのではないですか？
上書きで差し替えられたファイルへの参照などが残っているためでないかと想像しますが。

順番にデバッグしてみることを勧めます。
なお、OmegaChartの場合ビルドしたファイルをコピーするのが煩わしいと思いますので、以下の方法をすすめます。

１　VisualStudioのプロジェクトファイルの履歴で区別がつきやすくなるように、エクスプローラーで例えばzanetti.slnをomega_fixdate.slnに変更します（これはしなくても良いですがVSの履歴でzanettiだらけになるとわからなくなるので便利だと思います）。
　心配であれば、ディレクトリを丸ごと複製してバックアップしておいてください。
２　変更したソリューションファイルをダブルクリックするとVisualStudioが起動します。
３　メニューの「プロジェクト」「zanettiのプロパティ」を開いて編集。
３－１　アプリケーションタブ一番上のアッセンブリ名を変更します（現在利用しているOmegaChart.exeが上書きされないようにするため）例：OmegaFixDate
３－２　ビルドタブを開いて、一番下の出力パスを現在のOmegaChartファイルのパスに変更（dataフォルダが必要なため）。
　この時一番上の構成がDebugまたはアクティブな（Debug）であることを確認。
　＊デバッグで問題ないと分かれば、最終的にReleaseに変更してパスも変えるとリリース版が出力されます。
３－３　ここで、一度デバッグを開始します。緑右三角ボタンまたは「デバッグ」「デバッグの開始」
　OmegaChartが起動するはずです。エクスプローラーでOmegaChartのフォルダを見るとOmegaFixDate.exeが新たに作成されているはずです。options.confなどもオリジナルを利用するはずです。
４　これで準備完了です。ソースを変更して随時デバッグで動くか確認しながら作業して行きます。

今回であれば、 >>290 の修正をしてデバッグで動くかを確認。
動くようであれば、>>300 の修正をチャレンジという流れです。

おそらく一手間省けると思います。

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 10:14:17.36

>>327
早速のご対応ありがとうございました(^^ゞ

オリジナル(4fee7d9)版で行うと正常にビルドできてomrgachartも正常に機能しました。
多分おっしゃるとおりすでに修正済みのソースでやってみたのが間違いだと思います。
お手数かけて申し訳ございませんでした。

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 12:33:36.70

いつもお世話になっています
OmegaChartは今は必ず個別銘柄をダウンロードする仕様になっていますが為替や指数類だけで良い場合も結構あります
ダウンロード画面のボタンチェックで個別銘柄の取得を選択できればソースの切り替えにもつながり便利だと思います
DownloadOrderを見ると180行のif(stock_ds!=null) col.Add(stock_ds);
こいつの前にスキップ変数(?)をかませばよさそうな気がしますが上手い書き方ありませんか？

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 14:18:29.60

Download.csのコンボボックスcomboBoxSourceに、DownloadOrder.csのプロパティStockDataSourceNames [line]37 以外のitemを追加してこれを選択するだけでできるような気がします。
試していませんのでブレークポイントを置いてデバッグしながらチャレンジしてみてください。

[file]Download.cs [class]Zanetti.Forms.DownloadDialog [method]ShowOrderGroup() [line]435
if(_currentOrder==null)の前に以下を追加
comboBoxSource.Items.Add("個別銘柄をスキップ");

追加したitemをコンボボックスで選択して開始ボタンをクリックすると OnOKが呼ばれます。
さらにStartDownload() が呼ばれてこの最初のコード
_dataSource = _currentOrder.ConvertToDataSource();
でDownloadOrder.csの ConvertToDataSource() に移るようです。

おそらく、既存のデータソースを追加していなければstock_ds=nullのまま進むように思えます。
もし、業種別指数等のデータソースを一つでも変数colに追加していれば呼び出し元に戻ってそのまま進みそういですし、データソースが追加されていなければConvertToDataSource()の[line]540で中断されるように思います。

_dataSource.AsyncProcess(this.Handle);　以降でエラーが出る可能性があるかもしれませんが。

確信はないので、参考まで。

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 14:55:39.96

goto文で抜ければいけるんですがスマートな書き方ですね難しそうですがトライして見ます

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 16:34:41.12

>>331
うまく行くようですただ”個別銘柄をスキップ"というメニューが2つ出てきますね

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 16:44:03.39

>>333

おかしいですね。
メニューというのはコンボボックスの「無尽蔵、Yahoo時系列、edatalab.bet」などのアイテムのことですよね。

コードには1行を追加しただけですから、コンボボックスの最後に「個別銘柄をスキップ」が一つだけ追加されるはずですが。
行435以外にも追加していませんか？

**名無しさん＠お腹いっぱい。** · 2019/03/10(日) 17:01:14.56

>>334
すみません　修正したコードを使ってましたすばらしいアイデアを有り難うございました

**名無しさん＠お腹いっぱい。** · 2019/03/13(水) 18:56:39.41

どうもありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/03/14(木) 10:17:06.44

株価がなぜか置いてあるサイトの2019年3月13日分がNot Foundになるのですが、ほかの方は閲覧できますでしょうか？

**名無しさん＠お腹いっぱい。** · 2019/03/14(木) 15:17:53.13

>>337
ご連絡、ありがとうございます。修正しました。
ＲＳＳで株価取得するところからガッツリ失敗してました。

**名無しさん＠お腹いっぱい。** · 2019/03/14(木) 20:29:32.04

>>338 ご対応どうもありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/03/17(日) 09:42:02.17

>>298

最新版の更新ありがとうございました。
とても便利なツールです。

**名無しさん＠お腹いっぱい。** · 2019/03/19(火) 16:47:04.29

ブックマーク銘柄の株価ダウンロードをしたいダウンロードメニューは混み合ってるからお気に入りの右クリックが良さそう
自分にできるのは右クリックメニューを表示させることくらいなので恥をしのんでまたまた頼んでみる何とかなりませんか？

**名無しさん＠お腹いっぱい。** · 2019/03/19(火) 19:43:42.51

善意に甘んじてあまり負担をかけるのはよくないよ

**名無しさん＠お腹いっぱい。** · 2019/03/20(水) 06:23:37.68

そだね～

**名無しさん＠お腹いっぱい。** · 2019/03/20(水) 08:42:15.05

大まかには、

・BookmarkPane.csのInitContextMenuで項目を追加して、ダウンロードメニューを表示可能にさせる
・OmegaChartのお気に入りに作ったフォルダ配下銘柄がダウンロード対象ならば、これらの銘柄コードを取得する必要がある
　→下記のようにすれば銘柄コードを取得できる
ArrayList al = new ArrayList();
BookmarkFolder f = _treeView.SelectedNode.Tag as BookmarkFolder;
foreach(var e in f.Children)
{
al.Add(((BrandBookmark)e).Code);
}
・以下ＵＲＬの情報を参考にすると銘柄指定して株価ダウンロードする仕組みができる
https://osdn.net/users/omegachartuser/pastebin/6050

UpdateOneBrand uob = new UpdateOneBrand();
uob.Update(al);//このUpdateを改造して、ArrayListを引数して、銘柄コードを取得、順次ダウンロードする仕組みに書き換える

という流れで可能だと思います。

**名無しさん＠お腹いっぱい。** · 2019/03/21(木) 06:32:49.82

>>344
アドバイスありがとうございました大きな変更でなければ自分でもできるので真面目にソースを追ってみます

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 11:26:52.16

ということは BookmarkPane.cs にコンテキストメニュー表示、そこに例えば OnBookmarkDownloadで引数付きのUpdateを呼び出せば良くて
UpdateOneBrand.cs の改造は Updateのオーバーロード処理を書いてやれば従来の単一銘柄だけの更新も生かせるということでしょうか

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 12:37:20.71

OmegaChart TradeStationスキャナから出力したＣＳＶで株価取得に関してなのですが、
TradeStation 9.5ではCSVファイルでの出力ができなくなり、TXTファイルでの出力となっております。
また、出力されたTXTファイルを開きますと中部電力の場合
9502-NG

9502-TS
のように2つコードとともに4本値が出力されます。
この場合、TradeStationスキャナから出力したＣＳＶで株価取得を用いて作成したOmegaChartを用いた場合、どちらの市場の値が取得されるのでしょうか？

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 12:41:52.73

index.txtの市場がT1,T2であれば、TSのほうの4本値が取得されるということでよろしいでしょうか？

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 15:15:00.18

>>346
仰る通りです。

元のUpdateOneBrand、Updateでは、画面表示している銘柄の株価をダウンロードするということで、
AbstractBrand br = Env.Frame.ChartCanvas.GetBrand();
この１行で済んでいました。

オーバーロードで、銘柄コードを格納した変数を受け取って、格納した銘柄コード分をループさせて株価取得しに行く必要があります。
foreach文などでループさせながら、次のようなコードでOmegaChartが認識できる銘柄コードかを判別します。
foreach (var cd in codes)
{
//略
AbstractBrand br = Env.BrandCollection.FindBrand((int)cd);
//略
}

受け取るのはArrayListよりもListの方がいいかもしれないですね。銘柄コードはint型と決まってるわけですから。

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 15:20:47.40

>>347
仰る通り、東証のレコードの方が選択されます。

これはスキャナから読み取るC#コードですが、
https://osdn.net/users/omegachartuser/pastebin/5755
CheckMarketで、福証などは排除されます。大証やジャスダックとの重複はなくなったので、ここでは問題がおきないという認識です。
もし万が一、重複したコードが通ってしまった場合は、FillDataでエラーになるのでわかります。resultのキーはユニークである必要があるからです。

**名無しさん＠お腹いっぱい。** · 2019/03/22(金) 16:04:31.71

>>350 どうもありがとうございます。
ざっと調べた限りなのですが、TradeStationスキャナから出力したＣＳＶで株価取得のコードを用いて作成したOmegaChartでも、TXTファイルで出力された株価データからデータ取得ができるようです。

**名無しさん＠お腹いっぱい。** · 2019/03/23(土) 14:08:06.41

>>349
List型を引数にしてUpdateを書き足してみましたうまく行きましたどうも有り難うございました

**名無しさん＠お腹いっぱい。** · 2019/03/27(水) 11:45:00.60

data.cs では
public const int CREDITSHORT_OFFSET = 24;
public const int CREDITLONG_OFFSET = 28;

他の所ではすべてcreditlongがcreditshortより先に来ているこのためデータエキスポートとインポートで信用残の値が逆になりトラブルのもと

DataImporter.cs の中でも以下の様になっていますね
ndd.creditlong = BitConverter.ToInt32(farm.RawDataImage, i * 32 + 24);
ndd.creditshort = BitConverter.ToInt32(farm.RawDataImage, i * 32 + 28);

いっそのこと定義をかえてCREDITSHORT_OFFSETとCREDITLONG_OFFSETを逆にしたらどうでしょう?

**名無しさん＠お腹いっぱい。** · 2019/03/27(水) 19:50:58.49

>>353
オリジナルのOmegaChartのデータ構造は、作者ページでDate-Open-High-Low-VolumeShort-Longの順で４バイト整数を格納したバイナリファイルと説明されていたと記憶しています。
すでに作者のページが存在しないので確認はできませんが、機能追加等で誤変更されたのではないでしょうか。

ちなみに、DataImporter.csというファイルはオリジナル、panacoran氏の最新ソースのいずれにも見当たらないですね。

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 06:45:26.90

そうすると逆なんですかね

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 15:08:37.62

>>353
まったく仰る通りですね。
公式がないので、残った資料から判断するしかないのですが、公式のFAQにあるデータ形式は、買残→売残の順でした。
メーリングリストでそれらしき情報を探っても、売残→買残の並びである情報はありませんでした。
以前、ユーザーが多数使っていたCSV to Omegaのreadmeを見ても、「信用買残,信用売残」となっています。
ですので、Data.csだけが逆転してるように思えます。

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 18:08:58.64

>>356
そう言われると自分の思い込みだったかと急に自信がなくなりました。

しかし、Data.csで順番を書き換えると、過去データとの整合性がなくなります。
現在のデータソースで信用残は取れないですが、独自に信用残を追加している場合過去データを全て変更しなければならなくなります。

オリジナルには信用残のエクスポートはなく、Data.csの順番による不具合はないと思います。
他にも不具合があるというのであれば賛成しますが、
追加機能である信用残のエクスポートとデータインポートのコードを書き換えるべきと考えますが、どうでしょうか？

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 18:30:36.43

私は勝手に信用売り、信用買いの順で全て統一してしまいました後はおまかせします

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 19:40:27.64

済みませんかきわすれました 353です今も信用データ取っています過去データの入れ替えはできなくは無いですが結構つらいです

**名無しさん＠お腹いっぱい。** · 2019/03/28(木) 22:39:58.96

よほどのことがない限り、panacoranさんの方のソース変更までは至らないと思うんでご心配には及ばないと思いますよ。

DataImporter.csというのは、私が書いたコードだ思うんですが、時間とやる気が戻り次第、サンプルコードを直すという話にさせてください。
>>248と https://osdn.net/projects/omegachartusers/wiki/FrontPage
について注釈を入れて置くということでご容赦ください。

・OmegaChartのデータファイル・レコードの並び順が、信用売残→信用買残という指摘があり、このサンプルコードは、信用買残→信用売残という並びを想定しているのでこのコードをご使用の際は適宜お気をつけください。

**名無しさん＠お腹いっぱい。** · 2019/03/29(金) 09:12:57.22

yahoo信用残時系列が売残/買残だからですかね？今となっては分かりませんね。

**名無しさん＠お腹いっぱい。** · 2019/03/29(金) 15:39:42.41

労力が必要となる割に、プログラムのミスでエラーになる可能性があるならかえって直さないほうがいい気がします

**名無しさん＠お腹いっぱい。** · 2019/03/29(金) 16:50:59.50

確かに今となってはどうでも良いとは言わないがそのままでもいいでしょうね

**名無しさん＠お腹いっぱい。** · 2019/03/29(金) 18:13:16.29

信用データに関してはほとんどの人が利用していないと思われ、さらに週次データであることから無駄があリます。
また、日々のデータ更新も発表日以外は前日データを参照して埋めなければならずプログラムも多少面倒です。

データをdate-open-high-low-volumeだけにして、信用残に関しては日付の週次データとしてバイナリまたはcsvでサブフォルダに保存。
DailyDataFarmを読み込む時に信用がなければDataFarmを0埋め、信用データがある場合にはメインデータと一緒に読み込んで次の日付までの間をデータを代入。
このような形にすると多少コンパクトになって無駄が省けるようにも思っています。

しかし、信用データがないとしてもデータ読み込みが劇的に早くなるかは疑問符です。
しかもデータ構造を変えるとなると、データ更新系にも影響出る可能性も無いとも言えず、かなり大掛かりになるかもしれません。

ちょっと思いついた机上の空論で、労多く功少なしといったところですから単なる話題提供としてスルーしてください。

**名無しさん＠お腹いっぱい。** · 2019/03/30(土) 06:46:35.06

Omegachartの自由直線はカーソルを離すと大部分が点線表示になりますよねあれは仕様ですか

**名無しさん＠お腹いっぱい。** · 2019/03/30(土) 09:26:14.77

クリックしながらマウスを移動して、左クリックを解除した、その部分だけが実線。残りが破線という仕様。

**名無しさん＠お腹いっぱい。** · 2019/03/30(土) 10:13:35.93

そうでしたかありがとうございました

**名無しさん＠お腹いっぱい。** · 2019/03/31(日) 19:26:05.71

>>135
OmegaChartの初期化ファイル（ZIP)更新しました。2019年3月末分まで。
https://drive.google.com/open?id=1yFyFiI1OI-HlJwB9KoBMd9_qqa9y8mAQ
（前回と同じＵＲＬです）

**名無しさん＠お腹いっぱい。** · 2019/04/01(月) 11:05:20.44

ありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/04/02(火) 18:43:49.25

株価のダウンロードを自動化したいがメニューのマウスクリックが面倒くさい解決済みのかたいますか？

**名無しさん＠お腹いっぱい。** · 2019/04/02(火) 21:52:01.65

タスクスケジューラ起動で、ダウンロードする仕組みを作ったらどうですかね。

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 07:38:22.75

Omegaで設定してタスクに投げるそれありかな

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 07:59:18.62

定形のGUI操作にはautoit使ってる

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 08:38:17.73

最初はAutoHotkey で行けるのかなと思ったけど autoitで実際に自働DLできますか
Omegachartからダウンロード設定を読み込んでそれをパラメータで渡して起動できれば良さそう

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 16:39:01.49

とりあえずやってみたら簡単に出来ましたどうもありがとうございました

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 16:41:57.32

↑
AutoIt

**名無しさん＠お腹いっぱい。** · 2019/04/03(水) 20:05:16.91

平日19時に自動ダウンロードするサンプル（ダイアログが出るが何もクリックせずにダウンロード開始して終了後に閉じると思う）
前提として、ダウンロードオーダーを保存して、保存した設定でダウンロードの１が表示されることが必要。
19時以降は起動するごとにダウンロードしますので、修正の余地ありです。
充分検証していないので不具合あるかもしれません。

MainFrame.cs
①　line:120 public MainFrame() { の前々行あたりに以下を追加
//-----------
private Timer _timer;
private void Timer_Tick(object sender, EventArgs e) {
Console.WriteLine("timer" + DateTime.Now.ToString());
if (DateTime.Now.DayOfWeek > DayOfWeek.Sunday & DateTime.Now.DayOfWeek < DayOfWeek.Saturday & DateTime.Now.Hour >= 19) {
_timer.Enabled = false;
//保存した設定でダウンロードメニューの最初の項目が必須
DownloadOrder o = Env.Options.DownloadOrders[0];
DownloadDialog dlg = new DownloadDialog(o);
dlg.Show();
dlg.Refresh();
dlg.OnOK(null, null); } }
//-----------

②　public MainFrame(){を以下に変更
//-----------
public MainFrame() {
_timer = new Timer();
_timer.Interval = 60000;
_timer.Tick += Timer_Tick;
_timer.Enabled = true; }
//-----------

③　Download.cs 526行のOnOKをpublic に変更
public void OnOK(object sender, EventArgs args) {

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 06:52:53.66

>>377
DLの設定を読み込むにはこういうふうにするんですね参考になります
後は起動するたびにダウンロードするのは具合が悪いので時間帯制限をするとすれば条件の手直しですぐ出来るので
意図せぬDLを防ぐために例えば "Omegachart.exe /AutoDL”の様に引数を与えた場合だけに限れば可能ですよね
そうするとタスクスケジュラーに渡すのもすんなり行きますが他のやりかたも含めてアドバイス頂ければ助かります

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 12:46:54.46

>>378
起動するたびの再ダウンロードを抑制するには、最後のダウンロードした日付をファイルなどにセーブするなどいくつかの方法が考えられます。

せっかくですから、101の最終データをチェックして再ダウンロードを抑制する例を書いて見ます。

>>377 ①のTimer_Tickイベント内の最初に挿入してみてください。

//-------日経最終日のチェック
AbstractBrand nikkei = Env.BrandCollection.FindBrand(101);
DataFarm farm = nikkei.ReserveFarm();
int lastdate = farm.LastDate;
if(int.Parse(DateTime.Now.ToString("yyyyMMdd")) <= lastdate) {
_timer.Enabled = false;
return;　}
//--------

多分これで再ダウンロードしないと思われます。

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 13:32:21.22

なるほど色んなやり方を良く思いつかれますね確かに自動ダウンロード可能でした
データが準備できていない時間帯だと取得を繰り返す様ですが取得時間帯を決めてやれば問題なさそうです
どうも有り難うございました

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 17:06:44.26

ttp://datadownload.php.xdomain.jp/data/daily/2019/20190403.txt
は 7277以降取れていない様ですね本日分は大丈夫みたいですが

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 17:27:46.26

>>381
ご指摘ありがとうございます。直しました。

**名無しさん＠お腹いっぱい。** · 2019/04/04(木) 22:11:44.14

サーバーに障害が起きているのか、index.txtがダウンロード出来なくなっています。

**名無しさん＠お腹いっぱい。** · 2019/04/05(金) 07:58:57.91

どうもありがとうございます

**名無しさん＠お腹いっぱい。** · 2019/04/05(金) 18:49:53.36

なぜか株価が置いてあるサイトは、閉鎖になりそうです。BANされたっぽい。
index.txtダウンロードの件は、今確認してみると、問題なさそうですね。

**名無しさん＠お腹いっぱい。** · 2019/04/05(金) 19:33:11.58

もう閉まってるっぽい

**名無しさん＠お腹いっぱい。** · 2019/04/05(金) 22:07:11.81

2017年12月14日は普通に見れますね、一部だけ見れる理由もよくわからないのですが・・・

**名無しさん＠お腹いっぱい。** · 2019/04/08(月) 09:02:10.14

AngleSharp で書き換えればダウンロード速くなるかな

**名無しさん＠お腹いっぱい。** · 2019/04/08(月) 15:07:10.09

AngleSharpなるものを知りませんでしたが、
https://qiita.com/matarillo/items/a92e7efbfd2fdec62595
かなり良い感じですね。メンテが楽そう。

**名無しさん＠お腹いっぱい。** · 2019/04/09(火) 06:33:16.11

vs_community_2019 にしても大丈夫ですか

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 09:53:55.97

omegachartusers さんの5797<private FetchResult.Status GetPage>を使って複数ページを処理したいのですが今は最初しか取れません
開始日付と終了日付を指定する例のあそこのページとは少し違うが頁数をセットして繰り返せば済むと思ったのですがまるで駄目でした
C#は初心者なので上手く書けません。申し訳ありませんがどなたか御教示をお願い出来ませんか
...
var url = string.Format("https://...?code={0:D4}", code);
//これに"&...&page=page_count"の部分を付加して1頁以降を取得？
//var dates = new List<int>(_dates);
//var page_count = dates/DaysAtOnce; //ここは駄目っぽいので取り敢えず2で試す
page = null;
for (int i = 0; i < page_count; i++)
{
try
{
string web = url + (i > 0 ? "&ashi=day&page=" + (i + 1).ToString() : "");
using (var reader = new StreamReader(Util.HttpDownload(web)))
page += reader.ReadToEnd();
}
...
}
... 恥ずかしながら上記でこけて理由も良く分からず（forはtryの中で回しても同じでした）

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 11:48:31.02

エラーになってしまう場合は、そのエラー内容を書いた方が良いですよ。

ご自身でエラー原因と解決方法を探る場合は、

var url = の行にブレークポイントを設置
→ Debugモードで実行　
→ その行で一時停止したらＦ１１ボタン押下して1行デバッグを進める
→ エラーになるまで進める

一時停止しているときは、カーソルを変数に合わせると中身が表示されますので意図通りにプログラムが動いているかを確かめられます。
また、Debugしているときだけエラーにならないとか新しい発見もあったりします。

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 14:02:07.14

ビルドはできるのですが実行すると最初のページしか取れないんですよ

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 14:12:07.34

その理由は、これです。
page += reader.ReadToEnd();
後ほど、理由は書きますね。

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 14:58:53.04

皆さんすごいですね
トレードステーションから排出されたデーターを複数日取得して当日以外にデーター取得できるように取り組んでいるのですが自分も難航しています。

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 15:55:30.85

>>394
これ、結構書き直さないとダメそうです。
質問者の方がやったのは、ＨＴＭＬソースの文字列を物理的に足していっただけです。
正規表現置換で必要な情報を取るときに、最初にヒットした文字列しか取らない仕組みなので、最初の銘柄、最初の日付しか取得できないということになります。

ParsePageというところで、必要なＨＴＭＬソース文字列をbufという変数にいれて渡しています。
必要な情報はdictというSortedDictionaryというモノに入れています。
var dict = new SortedDictionary<int, NewDailyData>();

現状のコードは、１銘柄１日分しか処理しないという前提で書かれていますので、そこを修正する必要があります。
日付でループさせるのは、FetchPrices内で行い、都度ParsePageで処理すればいいのですが、ここで問題が一つ。
現状のParsePageは、1日分限定の書き方なのでParsePageは書き換えないといけないです。
銘柄loopは、RunFetchPricesで行われているので実際に書くのは日付loopから下という感じでしょうか。

銘柄loop
{
日付loop
{
GetPage
Regexで情報抽出
dictへ情報格納
}
}
return new FetchResult { Code = code, Prices = dict, ReturnStatus = FetchResult.Status.Success };

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 15:59:55.97

>>396
修正

銘柄loop
{
var dict = new SortedDictionary<int, NewDailyData>();
日付loop
{
GetPage
Regexで情報抽出
dictへ情報格納
}
return new FetchResult { Code = code, Prices = dict, ReturnStatus = FetchResult.Status.Success };
}

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 19:33:29.18

恐れていた事が起きましたねお手軽に行かないかと思っていたのが甘かったです
ソースの他の所を見ながらトライするしかなさそうですね

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 21:02:21.32

>>397
少しショックを受けてGetPageとParsePageを指定頁数だけまとめて処理できないか等と妄想してしまいました
ご丁寧に教えて頂き有り難うございました

**名無しさん＠お腹いっぱい。** · 2019/04/12(金) 22:46:17.62

400

**名無しさん＠お腹いっぱい。** · 2019/04/13(土) 08:44:57.14

>>396
横からすみません
現在はそのままのコードで1銘柄30本、同様のコードのUpdateOneBrandなどでも20本取れていますよね

**名無しさん＠お腹いっぱい。** · 2019/04/13(土) 11:42:18.93

となると最初の質問者さんは、ブレークポイントなどを使って自分の意図通りにプログラムが動いているかを確認すれば解決しそうですね。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 10:05:55.16

util.cs [IsMarketOpenDate(DateTime d)]の開場日誤判定について
祝日は内閣府ウェブページのcsvより

日付　IsMarketOpenDate 内閣府発表祝日
2019/4/30 非休場休日
2019/5/1 非休場休日（祝日扱い）
2019/5/2 非休場休日
2019/10/22 非休場休日（祝日扱い）
2020/2/24 非休場休日
2020/7/23 非休場海の日
2020/7/24 非休場スポーツの日
2020/8/10 非休場山の日

市場が開いている日をOmegaが祝日と判定しているかは調べていない。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 10:40:52.41

誰か教えてください。
移動平均線を増やしたいのですが？
以前どことどこを書き換えれよいのか
見たような気がするのですが見っかり
ません。連休に追加したいのですが。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 11:00:57.54

移動平均の本数増やすのは拡張キットのほうで対応することになるのではないかな

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 13:57:41.74

内閣府から出てる休日CSVは
http://www8.cao.go.jp/chosei/shukujitsu/syukujitsu_kyujitsu.csv
これを自動的に見に行く仕様にすれば、休日チェック漏れはなくなりそう。

でもOmega起動時毎回見に行くのもなんなので、休日CSVをOmegaフォルダに保存して、更新1か月経ってるCSVだったら内閣府サイトを見に行くという感じだと良さげ？

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 15:07:14.30

OmegaChartのデータダウンロードはIsMarketOpenDateで市場openを判定して、これ以外はダウンロードしない仕様のようだ。
問題は、市場openを休場日として判定して、ウェブでデータを公開していても取りこぼしになるかもしれないということ。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 17:16:57.89

休日と判定された日以外は立会日

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 17:38:41.13

１２月２３日月曜日は祝日ではないし、来年の祝日移動でもOmegaは誤判定すると思うが。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 17:50:16.79

これを見て修正するのが確実では
https://www.jpx.co.jp/corporate/about-jpx/calendar/

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 18:19:19.70

>>405
ありがとうございました。

移動平均線を増や件
拡張キットのdefaultomegaから簡単に変更
出来ました。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 18:45:52.58

自分はコンソールアプリでデータを取得しているので関係ないけど。
ここでは時系列データを取得している人が多いような印象を受けています。
無尽蔵など日付ごとにアドレスが異なるサイトからの取得に対して、銘柄ごとにアドレスを分けている時系列タイプのデータソースにも取得するdate配列を渡しているのがどうかなと思ってしまう。

祝日を拾ってくるのもいいけどアドレス変更やページの仕様変更でデータ取得同様ソース変更が必要になるかもしれない。

無尽蔵等JPXと契約していないと想像するサイトは将来閉鎖される可能性もあるかもしれない。
保存されている最終日付を渡して、それ以降の土日年末年始以外のデータを読み込みに行って、NoFoundであればスキップするような仕様変更を考えてもよさそうな気がしている。

>>410 このページいいね。ありがとう。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 19:38:44.75

>>412
Yahoo.csをみて自分が間違っていることに気が付きました。

ソースを見るとページ内の時系列はすべて読み込んでいるようです。
データもれはないと思いました。

しかし、祝日判定の間違いで渡されたdate配列に祝日があれば出来高0の空のDailyDataを作るようです。
チャートでは祝日も表示されてしまいますね。

取引ない場合もあることを失念していました。
やはり祝日判定は必要ですかね。

おさがわせして申し訳ありませんでした。

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 20:15:08.09

GetPageの
using (var reader = new StreamReader(Util.HttpDownload(url)))
page = reader.ReadToEnd();

のことですよね

**名無しさん＠お腹いっぱい。** · 2019/04/14(日) 21:07:42.49

ParsePageの中でforeach (Match m in matches)でテーブル一覧のデータをSortedDictionaryに追加しています。
正規表現が正しければページのすべての行を読み込むと思います。

最後のreturnの直前で、渡されたdate配列のうちSortedDictionaryのキーに存在しない日付を空のNewDailyDataで追加して埋め込んでいます。

そのあとにUpdateDataFarmが呼ばれてデータを更新するようですが、ここで最初にSortedDictionaryのデーター分のDailyDataFarmを作成しています。
foreachで出来高がある場合は４本値で更新して、ない場合は空のままSaveしてデータ更新を終了しているようです。

**名無しさん＠お腹いっぱい。** · 2019/04/15(月) 05:13:37.91

たとえGetPageが単銘柄1日分限定の書き方でもParsePageで全銘柄時系列ループすれば良いみたいですね
ありがとうございました

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 15:43:15.80

↑
一寸しつこくなるかも知れないが情報提供しますね
GetPage はデータ開始日から終了日までを単に読みに行くだけなので
データが次のページにあるときはアドレスを変えて繰り返し読ませれば良い従って ParsePage の書き換えは不要
取り敢えず以下でOK 最初の質問者さんが失敗したのは多分 DaysAtOnceの指定値が 1ページ分以下だったせいかな

try
{
for (int i = 0; i < page_count; i++) {
string web = url + (i > 0 ? "&ashi=day&page=" + (i + 1).ToString() : "");
using (var reader = new StreamReader(Util.HttpDownload(web)))
page += reader.ReadToEnd();
}
}
...
こいつはHTML文字列を単純に読み加えるだけなので思わぬデータ重複？や不具合な文字列を拾う可能性もある
詳しくは調べていないが 3回目の読み込みでリモートサーバーエラーが出たのはそのせいかもしれない
ParsePage の正規表現変更で対応できる問題かもしれない
ただこれ以上やると指数の取得だけならまだいいが個別銘柄までとなると
サーバーに大きな負荷をかけて迷惑を起こす恐れもあるので ParsePageで必要になる新しい正規表現は公開しません
（Omegachartにとって必須ではないし自分は別プログラム使ってあちこちから好きに取っていますので悪しからず）

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 18:15:22.86

OmegaChartのダイアログでのダウンロードは最大２か月間の様です。
Yahoo.csも同様ですが、コードを眺めたかぎりではダイアログの次の日付以降で渡す配列が３０本以上あれば銘柄ごとに複数ページを読むと思われます。
（全銘柄を読み終わったのちに残りの日付ページに変更する仕様のようです）

＊株探に関しては昨年末にページ変更されて、正規表現の修正をしていないようなことを１か月前に作者が言っていたような記憶があります。
間違いかもしれませんが、300あたりから過去ログを読み返してみてください。

正規表現が正しいと仮定して、２か月間以上の過去データをダウンロードしたければ、下のようにコードを変更してダイアログで目的の日付を選択すればできると思われます。
膨大な時間がかかりそうですが。

Download.cs の ListDates()　
DateTime start = ld.AddMonths(-2); //632行　-2を-6などに変更

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 18:52:16.43

>>418 5797のコードであればYahooと違って、株探は複数ページは読まないですね。
失礼しました。

正規表現もオリジナルのままではだめですね。
これでどうでしょう。
var valid = new Regex(@">(?<year>\d{2})/(?<month>\d?\d)/(?<day>\d?\d)</time></th>\r\n" +
"<td>(?<open>[0-9,.]+)</td>\r\n<td>(?<high>[0-9,.]+)</td>\r\n<td>(?<low>[0-9,.]+)</td>\r\n<td>(?<close>[0-9,.]+)</td>\r\n" +
"<td>.*</td>\r\n<td>.*</td>\r\n<td>(?<volume>[0-9,]+)</td>");

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 19:15:08.10

>>419 C#でNetFrameWorkコンソールアプリを作成して
以下のコードで正規表現試してみてください（urlに時系列ページアドレスを代入のこと）。

using System;
using System.Text.RegularExpressions;
using System.Net.Http;
namespace ConsoleApp1 {
class Program {
static void Main(string[] args) {
var valid = new Regex(@">(?<year>\d{2})/(?<month>\d?\d)/(?<day>\d?\d)</time></th>\r\n" +
"<td>(?<open>[0-9,.]+)</td>\r\n<td>(?<high>[0-9,.]+)</td>\r\n<td>(?<low>[0-9,.]+)</td>\r\n<td>(?<close>[0-9,.]+)</td>\r\n" +
"<td>.*</td>\r\n<td>.*</td>\r\n<td>(?<volume>[0-9,]+)</td>");
string buf = null;
string url = "";
if (url != "") {
using (HttpClient client = new HttpClient()) {
buf = client.GetStringAsync(url).Result;　}
var matches = valid.Matches(buf);
foreach (Match m in matches) {
for (int i = 1; i < m.Groups.Count; i++)
Console.Write("{0} ", m.Groups[i].Value);
Console.WriteLine();}} else
Console.WriteLine("コードのurl入力が必要");
Console.WriteLine("何かキーを押すと終了");
Console.ReadKey(); } }
}

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 19:40:03.10

あはは盛り上がって来ましたね

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 19:50:55.33

連投すまぬ
@"> の所を @"<th scope=""row""><.*>と長ったらしくやってしまったが後は全部同じだった

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 21:19:39.87

>>391
正規表現を変えて、391のコードを

page="";//nullから変更

するだけで２ページの６０本とれるような気がする（試していない）。

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 21:27:29.50

>>423

ただし、既存の日付データと重複するものはOmegaデータに書き込むときにエラーになるかも。

ブレークポイント作って、データ取得を確認しながらデバッグして試行錯誤するのも面白いと思うよ。

**名無しさん＠お腹いっぱい。** · 2019/04/16(火) 21:37:43.59

>>424

21行目を変更しないと１度ページ毎に２０行以上はデータ読めないので変更必要かも。

private const int DaysAtOnce = 60; // 一度に取得する時系列の営業日数

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 06:21:47.87

あそこは構造上本日分を繰り返し読み込む事になる
試しに1銘柄だけ最大の300本取ってみたら本日分だけが重複して309本取れていた
これは避けられないのでどこかでフィルターする必要がある正規表現でも良いけど上手い書き方ないかな

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 07:44:47.28

>>426
本日分300本？
1銘柄で300ページ読んだのですか？
&ashi=day&page=2 から　&ashi=day&page=10 と9ページを追加して読んでも、当日分しか読めなかったのですか？

毎ページごとに最終日付分が最初にあるため、これを省かなければなりません。
そもそもSortedDictionaryは同一キーをを追加できないので、そのまま実行すると、追加の段階でエラーで止まるはずで30本以上は追加できないのでは？

ParsePageの298行で追加する場所に
if (dict.ContainsKey(Util.DateToInt(date)))
を追加することで、すでに追加されているキーはスキップしてエラー回避できると思います。

根本的に改造するとなると、GetPage、FetchPricesにページ番号の引数を追加して、Run()の中でnikkei225の日付データと渡された日付配列を比較しながらページ番号をインクリメントしていく方法もあると思います。

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 08:06:09.98

>>426

余計なお世話かもしれないけど、膨大な複数ページを同一サーバーに連続してリクエストするとアクセス拒否やさらに続けていると不正アクセスや攻撃の疑いなどで調査されることもあるかもしれませんよ。

ページ取得ごとにある程度のウェイトをかけた方が安全と思います。
普通はThread.Sleepだけれと、このクラスの書き方はマルチスレッドを想定しているので、もしかするとTaskのように実行スレッドにウェイトをかける方法は別かもしれません。

現在であれば、Taskの非同期処理で書き換えた方がいいのかもしれない。
このスレッドの書き方はよくわからんし、調べる気にもならん。

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 08:46:58.47

オメガからではないが10ページ分300本サーバーの迷惑にはならない様にしている

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 09:10:58.31

>>429
余計でしたね。失礼しました。

別のプログラムであれば、SortedListの方が使い勝手がいいかもしれません。
indexによるキーまたはValueのアクセスもできるはずです。
同一キーの存在調査は同じく、ContainsKeyです。

Omegaのデータ更新クラスは難しくて、いろんなところに飛ぶため読んでいて腹が立ちますね。
また、データセブのときにunsafeでポインタも利用しているし。

SortedListでデーターを読み込んでバイナリに保存する方が簡単ですね。

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 10:19:05.25

C#は殆ど使わない方言なので読めるが上手く書けずに苦労しますわ

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 14:40:50.22

>>428
かなりしっかりしたサーバーでないとエラーにならずに適切に全データーを取得できないような気がするのだけど、そこのところどうなのだろう？

**名無しさん＠お腹いっぱい。** · 2019/04/17(水) 16:47:24.12

>>432
ウェブページの読み込みごとに適切にウェイト（1秒とか）をかけるとエラーにはならないと思います。
以前のk-dbではアクセス制限がキツくウェイトかけても数ページ読み込むとすぐにアクセス拒否されましたが。

しかし、Yahooはスクレイピングの禁止を明示していますし、カブタンでも
「複製、編集、加工等を行う行為」
「コンテンツ等を蓄積する行為」
「サーバーに不当な負担をかける行為」
などを禁止していますので、アクセス数などからスクレイピングとデータ蓄積を疑われて調査され訴えられる危険性は常にあると思います。
調査しようと思えば、プロバイダーに協力を求めれば身元はわかると思っています。

自分はこれらのページのスクレイピングをすすめているのではありません。
あくまでC#プログラミングのアドバイスをしているだけのつもりです。

**名無しさん＠お腹いっぱい。** · 2019/04/18(木) 14:33:52.09

株式投資メモというサイトだといろいろデータがそろっているようなのですが、こちらのサイトについて検討された方ございますでしょうか？

**名無しさん＠お腹いっぱい。** · 2019/04/18(木) 15:21:18.54

ここすんなり取れそうですね

**名無しさん＠お腹いっぱい。** · 2019/04/19(金) 10:11:14.71

k-db.comみたく東証から警告されて、突然閉鎖になるリスクはないのかな

**名無しさん＠お腹いっぱい。** · 2019/04/19(金) 12:30:26.81

その可能性はあるね個別銘柄の緊急取得には良さそう地方市場のも揃っていて簡単にCSVで300本取れる

**名無しさん＠お腹いっぱい。** · 2019/04/19(金) 14:51:14.55

k tanから指定日または保存最終日以降の複数ページをTaskの非同期で取得してアップデートするクラスほぼ完成。

非同期なので、ダウンロード中も他の銘柄を表示が可能（スクリーンングはダメだが）。
ダウンロード経過はステータスバーに出力。
全部を試す気にはならないが、数銘柄で試してみた。
当日分はザラ場中なので確定した終値でないが。

以下は取得ログ
2019-04-19 14:36:33 200[OK] 201 円／ドル ?code=0950
2019-04-19 14:36:34 200[OK] 201 円／ドル ?code=0950&ashi=day&page=2
201 円／ドル 60件 2019-01-24-2019-04-19
2019-04-19 14:36:36 200[OK] 525 情報 ?code=0275
2019-04-19 14:36:37 200[OK] 525 情報 ?code=0275&ashi=day&page=2
525 情報 60件 2019-01-24-2019-04-19
2019-04-19 14:36:38 200[OK] 6758 ソニー ?code=6758
2019-04-19 14:36:40 200[OK] 6758 ソニー ?code=6758&ashi=day&page=2
6758 ソニー 60件 2019-01-24-2019-04-19

**名無しさん＠お腹いっぱい。** · 2019/04/19(金) 18:07:24.91

最近上場した銘柄のみスクリーニングってできますか？

**名無しさん＠お腹いっぱい。** · 2019/04/19(金) 20:01:27.47

ブックマークフォルダーに新規上場銘柄を入れてやる

**名無しさん＠お腹いっぱい。** · 2019/04/21(日) 15:29:43.88

スクリーニングにするときに毎回お気に入りフォルダを選択するのがめんどいので
固定にしたいんですけどreturn _selectedFolderを
どうやって指定すればいいでしょうか

**名無しさん＠お腹いっぱい。** · 2019/04/21(日) 16:33:29.91

スクリーニングの条件設定画面、フィルタを「お気に入りのフォルダ」に強制的に変えるには、
ScreeningDialog.cs の一番上の方
_filterBox.SelectedIndex = 5;//0から5に変更

たぶん、フォルダ指定もしたいという話だと思いますが、それは自分もわからなかったです。
SelectBookmarkFolder.csの_treeViewを見ればできるような気もする。

**名無しさん＠お腹いっぱい。** · 2019/04/22(月) 22:09:20.80

>>442
やっとわかった。Bookmarkの中にBookmarkFolderという要素がある。
foreach でRoot.Children（ルートのBookmarkFolderの子供）を回して、フォルダ名で検索すれば見つけられる。
ただし、ネストが深いところにフォルダを作るとハンドリングが難しくなるのでなるべく浅いところに作る。