pagetakaBlog

最近リフォームと鳥取県日南町の記事多め。写真、PC、ネット等の話題も

PC、ネット、情報端末

phpMyAdmin:MySQLデータをエクスポートするときの設定保存場所

前説:MySQLを修復した後、データのエクスポート設定が消える。 MySQLが壊れたときの復活作業手順。 サーバーからデータベースのテーブルデータをエクスポートする設定を保存している場所は…。 自己責任でよろしくお願いします。 前説:MySQLを修復した後、…

Python:「相関係数」を求める前に、no attribute 'shape' と表示されるエラー

タイトル一部訂正:誤=標準偏差を求める、正:相関係数を求める 前説:「Error Occurred: 'float' object has no attribute 'shape'」と表示され困りました。 列ごとに nx = np.array(df['コラム名').astype(np.float64) のように書き「相関係数」をもとめ…

Win11:CR2032を新しくし、PC起動時のトラブル回避

症状:Win11を立ち上げると2回電源on/offを繰り返し、3回目にBIOS設定への移動を案内表示。 Windows11パソコン、爺は普段、最後にコンセント電源を切って終了します。年明け度、電源入れ、PC起動してもすぐに立ち上がらない症状になりました。 2回電源…

ここ数日で3件のネット等のメンテ…。

ここ数日、パソコン、スマホ、ネットに関係して相談・メンテの依頼が3件ありました。ひとつは、スマホが大手キャリアの専用Wi-Fiにつながらなくなったというもの。爺のスマホ持って行き、設定したらつながりました。あまり考える必要はなさそうです。つなが…

「N-NET'71」を26年ぶりに復刊・第20号発送。

一昨日、高校同期生の情報誌を26年ぶりに郵送しました。本日、「受け取ったよ」「LINE友だちになる」などのご連絡をいただき始めました。鳥取県日野町にかつてあった「根雨高校」は統合校の「日野高校」になりました。母校の名前が無いというのはチョット寂…

WindowsPC、使えるよう設定…わりと時間かかった。

昨日、町内会用ということでPC購入・初期設定のお手伝いしました。ラップトップのWindowsPCです。昔であれば、そう手間もなかったことかと記憶していますが、登録することが多いのか、間違えないよう初期設定を終え、使えるようになるまで結構な手数で、疲…

ChatGPTさまにお尋ね:ベクトル(内積)が株価予測に役立つ根拠を教えてください。

ChatGPTさまに、ベクトル(内積)が株価予測に役立つ根拠を教えていただきました。 Q:ベクトル(内積)が株価予測に役立つ根拠を教えてください。 A:ベクトル(内積)は株価予測に役立つ場合があります。以下にその根拠を示します。 1: 類似度の算出:株…

「Pythonで動かして学ぶ!あたらしい機械学習の教科書 第3版」読み始めました。

Pythonで動かして学ぶ!あたらしい機械学習の教科書 第3版作者:伊藤 真翔泳社Amazon これまでPythonでできたこと(ある程度、という意味でね) 爺は、職業訓練所でVB.NETを習った後、ネット関係が多い仕事柄、HTML、CSSを軸に、MySQL、PHP、…

chatGPTの衝撃。質問にそれらしい日本語で答えてくれる。単なる検索とは一味違う。

【爺の質問とchatGPTの回答】台湾渡航、岡山からも直行便再開が「毎日、一日ずつ」(あたり前田のクラッカー)近づいてます。それで、今話題の「cahtGPT」に、状況を尋ね、注意点を教えてもらいました【上図】。旅行話題なら「旅のブログ」に書くところです…

ネット接続直しに岡山駅西口あたりへ行ってきました。

突然電話鳴る(これから鳴りますよ、というのはモチロンないけど)。 電気が入らない。 無線LAN接続、有線LAN接続。 突然電話鳴る(これから鳴りますよ、というのはモチロンないけど)。 本日午後、爺が社会人だったころの関係で御世話になった「人生…

MySQL:DataFrameへ一度に読みこんでスピードアップ(Python, pandas)

パソコン環境。 実現すること:株で儲ける準備…。 行程概要。 銘柄コードごとにSQLしてたら、1,050秒かかった。 MySQLから設定範囲N日分データをDataFrameにしてみたら、14秒くらいで完了。 問題は、これでもうけを出せるか、株の売買…。 【98%程度時間を節…

最近のPython修行…。

前説:Pythonなどのブログ記事11月中旬から書いてない。 Excel形式に保存するのに時間かかっていた。 CSV保存、pandas利用で早くなった。 pandas の本。 このあとは numpy の利用かな~。 逆時計曲線(逆クロックチャート) 前説:Pythonなどのブログ記事11…

Python:MySQL接続エラー「no attribute 'connector'」(VSCode)

現象: module 'mysql' has no attribute 'connector' が表示されます VSCode(1.73.1)上で Python3.9.13(base:conda)のスクリプトを使い、XAMPP(v3.3.0)内のMySQL(10.4.25-MariaDB)に接続し、今朝、最初の作業まで快調に動いてました。 その後、何や…

新型コロナワクチン接種証明書アプリ、4回目でトラブル…。

本日、4回目の接種してきました。 3回目からだいぶ空きましたが、本日4回目の「新型コロナワクチン」を注射してもらいました。 2時間くらいたってますが、今のところ発熱無いようです。 ワクチンは、ファイザー・コミナティで「COVID-19 mRNA」という種…

Python:「PDFMiner」と「PDFMiner.six」で東証株式相場表を解析

「PDFMiner」で東証株式相場表(日報、PDF)を解析しかけたら…エラー表示、止まった…。 止まったPythonスクリプト 対策:失敗=「PDFMiner」入れなおす 対策:成功=「PDFMiner.six」をインストール 余談:「pdfminer.six」だけだとどうも動かないのか…よく…

東証株式相場表:PDFMinerで解析しMySQLへの流れ<<まとめ>>

11/5追記:PDF解析に使うPDFMinerの使い方、一部修正 前口上:ひとまとめにして「備忘録」のように PDFMinerの使い方にてこずりました。 翌市場日の午前8時半頃に直近日のPDFが公開されるみたいなんですよね 11/5追記:PDF解析に使うPDFMinerの使い方、一部…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(7)恥ずかしながらのスクリプト

11/5追記:PDF解析に使うPDFMinerの使い方、一部修正 PDFMiner使い、東証株式相場表(日報、PDF)からデータ抽出し日別CSVにする 恥ずかしながらのPyhtonスクリプト MySQLへ放り込むまで三つのステップ 11/5追記:PDF解析に使うPDFMinerの使い方、一部修正 P…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(6)MySQL項目データ形式調整

MySQLへのデータ形式変えたら1割くらい容量減った 株価データには、数字のほか「-」というのがあって… 「LOAD DATA INFILE 」つかい約59万行のCSVデータを約6秒でMySQLへ放り込めた。 MySQLへのデータ形式変えたら1割くらい容量減った (1)東証株式…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(5)まだエラーが二つ

東証株式相場表(日報、PDF)を解析するPythonスクリプトでエラー二つ ひとつめ:「.start()」は、メンバーではないとのご託宣 ふたつめ:「boxes_flow=None」はリファレンスにはあるけど…警告エラーが PDFMiner使ったPythonスクリプトは、ふたつの警告エラ…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(4)XAMPP起動、テーブル設定

XAMPPをインストールし起動など MySQLをつかう場面 MySQL:データベース上にテーブルを作る XAMPP上でphpMyAdmin起動 phpMyAdmin使って、データベース「stock」作り、テーブル「market_data」設定 10/28追記:「まとめ」UP XAMPPをインストールし起動など 東…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(3)日報PDFをDL

Python:DLのみ、MySQL不要バージョン Pythonスクリプト:株式相場表(日報、PDF)をDLする 10/28追記:「まとめ」UP Python:DLのみ、MySQL不要バージョン 初めて東証サイトから株式相場表(日報、PDF)をダウンロード(DL)する時用です。まだ、MySQLのテ…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(2)

11/5追記:PDF解析に使うPDFMinerの使い方、一部修正 東証株式相場表(日報、PDF)解析の引っかかりどころ 株価データのうち「-」は該当数値がない…。 利用する項目を絞り込みました 11/5追記:PDF解析に使うPDFMinerの使い方、一部修正 Python:「PDFMiner」…

東証株式相場表:PDFMinerで解析しMySQLへの流れ(1)

東証株式相場表(日報、PDF)は手ごわかった 作業するPCの問題 IDEはVSCodeを使いました 東証株式相場表(日報、PDF)は手ごわかった 東京証券取引所日報 | 日本取引所グループに掲載されている「株式相場表」(PDF)を利用したいと考えました。Pythonで、(…

東証株式相場表:データがあるけど拾えてない7銘柄の対策…前進…か…。

前説:東証株式相場表(日報、PDF)約3800銘柄のうち、7銘柄データピックアップできていなかった。 正規表現とPython.replaceを工夫し、何とかなったかしら……(不安だけど)。 1:正規表現でヒットする範囲をゆるくしてみた 2:「,」数字3桁区切りコンマ…

東証株式相場表:約400ページの構成、改めて眺めています。

前説:Pythonで東証株式相場表(日報、PDF)からCSV作ってみたけど…。 PDFMinerをつかったPythonスクリプトで東証株式相場表(日報、PDF)からCSVが何とかできたか、と思ったものの、できあがったファイル容量が日ごとにいくらか異なり懸念がありました。 9…

Python:PC3時間半動かし、3月からの東証株式相場表、PDFMinerで何とかなったかも…。

前説:東証株式相場表(日報、PDF)銘柄コード隣りの1文字に気づかず1か月以上 東証株式相場表(日報、PDF)をPDFMinerでなんとか解析できそうだと思ったのが9月5日でした。 Python:VSCodeでPDFMinerを使って、東証株日報PDFから表抽出(3) - pagetakaBlo…

東証株式相場表:日報コード欄に1文字表示が、CSVの位置関係を…。

以前掲載したPythonスクリプト、修正。 東証株式相場表日報(PDF)をPDFMinerで解析できていると思ってたけど…。 気づいたのは出来上がったファイルの容量が大きく異なる日があったから 「D」以外もかなりある 修正:恥ずかしながらのPython script 東証株式…

Python:複数CSVをひとつにまとめれば、MySQL「LOAD DATA INFILE」に対応できる…。

前説:複数CSVで「LOAD DATA INFILE」をfor文で使えるようにしてみた。 記事タイトルのとおり、複数のファイルをひとつにまとめればOKではないのかしらん…。 複数CSVをひとつにし大きなCSVをひとつ用意するのを省き、「Dataframe」にして、MySQLへ書き込むと…

XAMPP:MySQLがすぐ止まる。3306バッティングしてない…。

MySQLスタートしてもすぐストップ 先例があり、参考にさせていただきました。 フォルダ操作で退避・復帰、 注目するのは、「data」フォルダ XAMPPを起動・停止させるタイミングは大切みたい MySQLスタートしてもすぐストップ XAMPPを稼働させ、apacheのスタ…

Python:CSVの文字コード変更を同一フォルダで実行(VSCode)

前説:CSVの文字コード、utf_8_sig、cp932 などで苦戦 同一フォルダ・同一ファイル名:恥ずかしながらのPythonスクリプト(文字コード変更し保管) 別フォルダ:恥ずかしながらのPythonスクリプト(現状Pathから別Path置換) 余談: shift_jis は cp932 で文…