min117の日記

初期desireもち。趣味Mac,メインFedora,仕事xp。

Linux

Python3 twitterからKEYWORD関連のツイートを大量に取得する(fastTextに機械学習させるための教師データを取得する)

面白そうな記事を見つけた。 tech.wonderpla.net facebook謹製の「fastText」。機械学習により文章の類似度を判定しテキストを分類できるらしい。 大量のデータをtwitterから取ってきてfastTextに学習させると、次回からはこちら(人間)が与えた文章を(学…

エストニア電子国家「e-Residency」に住民登録して個人IDカードを取得する

世界で最も電子化の進んだ国。エストニア。2000年には電子政府「e-Residency」が始まり、行政活動・交通機関・医療サービスから銀行取引に至るまで、あらゆるところが電子化されているらしい。 そしてエストニアでは世界中の誰でも電子国家上の住民になれる…

RaspberryPi3 外部公開している自宅サーバにLAN内からドメイン指定でアクセスする(dnsmasqで家庭内の名前解決)

自宅サーバを外部に公開している。外出先からはDDNSのドメイン名でアクセスできている。 しかし、そのドメイン名に家庭内からアクセスしようとすると名前解決できずエラーになってしまう。 家庭内のローカルIPアドレスで指定すれば正常にアクセスできる(当…

bitcoin bitFlyerからの送金が1週間しても処理されない

1週間前にbitFlyerにあったビットコインを手元(Electrum)に送金した。 min117.hatenablog.com 送金が処理されたかどうか、bitFlyerではない第三者サイト(ブロックチェーンエクスプローラ)で確認していたが、1週間経ってもブロックチェーンに乗らない。 …

bitcoin bitFlyerからRaspberryPi3のElectrumへビットコインを送金(手数料287円)

2018年も残すところ2ヶ月。今年は 2月のcoincheck の事件に始まり、9月にはテックビューロの不正流出もあり。仮想通貨の信頼性がだいぶ落ちた年だった。 不正流出を受けて、bitFlyerでも緊急点検した旨の連絡が来ていたっけ。 bitFlyerも株式移転とかいろい…

情報処理安全確保支援士(SC)平成30年度 秋期 午前Ⅱ 解答速報(2018年10月21日実施)

本日 2018年10月21日。受けてきた。 自分なりの解答速報。 ※ 午前Ⅰ は免除なので受けてない。 ※ 午前Ⅱ の解答速報。 <平成30年度 秋期 午前Ⅱ 解答速報> △が付いていないものはまず間違いなく正解(過去問にある or 調べた)。 △が付いているものは自信なし…

iMac 超高画質な壁紙サイトで毎日のパソコンを楽しくする

iMac5K にして2年。 min117.hatenablog.com 5KのRetina最高。高画質がここまで素晴らしいとは。 min117.hatenablog.com この2年の間に4Kテレビが普及し(やっと世間がiMacに追いついてきたようで)高画質な壁紙を見かけるようになった。 // とてもよい壁紙サ…

bash はてなブログの全記事を自動でPDFにするスクリプト

ブログ記事数もそこそこ増えてきたけど今まで一度もバックアップを取っていない。Webサービスなんてしょせん他人のフンドシ(提供する場所)上で作っているものなので、例えばはてなブログが倒産したり、突然ブログサービスをやめたら全て消えてしまう。 信…

Youtube大規模障害 サーバ管理者の視点から(少しマトモな)分析を試みる

本日 2018/10/17(水)。Youtubeで大規模障害が発生。 世の中では例えば「Twitterで #YouTubeDOWN タグが話題になった」とか「エラー画面に登場したサル画像のセンスがいい」とかホントどうでもいい情報しかニュースになっていない。 しかし「Youtubeが落ち…

ffmpeg を使って動画(mp4)から音声(mp3)を抽出する

「練習で使うから、この動画の音声だけCDにしてくれない?」という相談。 ダンスの練習らしい。 もちろんできる。Linuxでやる(fedora)。ffmpegを使う。 コマンドはこのへん参照。 qiita.com <使ったコマンド一覧+作業> Linuxにて $ ffmpeg -i 動画名.mp…

Amazon プライム会員が無料で聴けるPrime Musicが季節に合いすぎて最高

秋の入り口。この時期に聞く井上陽水の良さといったらない。 www.youtube.com www.youtube.com www.youtube.com // Amazonプライム会員 だとこれが聞き放題。 どれも最高の音質で聴ける。FireTVもあるので、お気に入りに入れればリモコンからテレビで再生す…

RaspberryPi3 Python3 で import MeCab して形態素解析 → 成功

前回記事でRaspberrPi自体へのMeCabインストールは完了したので、これをPython3から使えるようにする(Python3にバインディングする)。 min117.hatenablog.com この記事を参考にするが、Python2.7を使っているので、Python3に読み替えて進める。 uepon.hate…

RaspberryPi3 にMeCabをインストールする(Python3環境)

前回記事で fastText をインストールしたので、ひき続きMeCabをインストールする。 min117.hatenablog.com 参考記事はこれ。 qiita.com 前提 ・python3で試す。python2.7は無視。 ・2018/9/2時点 $ sudo apt-get update $ sudo apt-get install mecab libmec…

RaspberryPi3 にfastTextをインストールする(Python3環境)

気になっていたこの記事。 deepage.net // RaspberryPi3 にインストールして体験してみる。 前提 ・python3で試す。python2.7は無視。 ・2018/9/2時点 $ python -V $ python $ ctrl + c $ git clone https://github.com/facebookreaearch/fastText.git $ ls …

RaspberryPi3 で米国版Google Oneを試してみる

Googleドライブが「Google One」に名称を変えて新ストレージサービスになるらしい。 japan.cnet.com 「米国で一般提供開始」したんだから、日本からでも英語版の環境でログインすれば使えるのではなかろうか?と考えた。 // ちょうど英語版でセットアップし…

bash の行数カウント wc -l と同じことをWindowsのコマンドプロンプトでやるには → find /c /v "" とする

Linuxで行数をカウントするのはカンタン。例えば、拡張子sh(シェルスクリプト)がこれだけあったとする。 $ ls | grep sh その行数を数えるには wcコマンドにパイプすればいい。オプションは -l(たぶん line の頭文字)。 $ ls | grep sh | wc -l // これ…

Python3 ビットコインの対円の情報をbitFlyerから取得する

金もうけには全く興味は無いが、ビットコイン自体は持っている。ブロックチェーンの技術自体は素晴らしいと思うので、勉強のために試しに入手したからだ。 もちろん無料で。お試しにカネ払う気なんてサラサラ無い。 min117.hatenablog.com 入手当時(2017年1…

ドコモ光(GMO v6プラス) IPv6でポート開放する

IPv6ではポート開放は原則不可と言われているが、実際にできたのでやり方をメモしておく。 やり方はいたって簡単。 ① IPv6の光ルータに割り当てられたIPv6のプレフィックスを調べる。 ② それを元に自分に向けて開かれているポートの範囲を調べる。 ③ あとは…

RaspberryPi Zero 無線LANインターフェース(NIC)にグローバルIPv6アドレスを振る

ドコモ光(プロバイダGMO)v6プラスでのIPv6運用(MAP-E方式)が安定してきた。 min117.hatenablog.com // ので、家庭内の機器もIPv6に本格的に対応させていく。 まずは RaspberryPi Zero で試す。ラズパイは 1も2も3もZeroも持っているが、Zeroは有線インタ…

ドコモ光 IPv6で光回線が安定するまでに参考にした記事

// 前記事までで家庭内の光回線(ドコモ光+プロバイダGMO)がやっと安定した。いろいろ調べた情報のうち、有用だったものをメモしておく。 ● 全く同じ構成で困っていた人の記事。 digifla.net ・「ドコモ光+プロバイダGMO」で開始したが、不調でBIGLOBEに…

ドコモ光 BUFFALOルータ「WXR-1750DHP」のIPv6(v6プラス接続)通信エラーログ「BIG hammer」「headroom 192 failed」は「NDプロキシ設定」で解消する

// ドコモ光(プロバイダGMO)で v6プラス接続 すると、通信ログに「!!!BIG-hammer!!!」や「headroom 192 failed」というエラーが大量に出て、無線が止まってしまう現象が発生した。 min117.hatenablog.com <解決方法> まずは解決方法の結論を書く。…

RaspberryPi3 で syslog サーバを立てて、光回線ルータ(WXR-1750DHP)の通信ログを保存する

前記事でドコモ光回線を IPv6(v6プラス)化した。 min117.hatenablog.com しかし速度が上がったはいいが、どうもおかしい。無線LANが頻繁に切れる。ルーター(WXR-1750DHP)の上から2つ目のランプが消えてしまい無線LAN機器に一切繋がらなくなってしまう。…

RaspberryPi3 Python3 + NumPy でコサイン類似度を計算する(協調フィルタリング)

面白い記事があったで雑誌を買ってしまった。紙媒体で欲しいと思ったのは久しぶり。 使える数学という特集で、とても分かりやすく数学を書いていた。こういう記事なら買ってでも読む価値がある。 コサイン類似性、協調フィルタリングについての内容は特に興…

bash echo-sdコマンドで >突然の死< ジェネレーター を試す

ツイッターでよく見かける「囲み文字」を作るコマンドがあるらしい。 // >突然の死<ジェネレーター - 拡張 POSIX シェルスクリプト Advent Calendar 2013 - ダメ出し Blog 暇なのか天才なのかよく分からないけど、すごいものを作るもんだ。 さっそくインス…

vim テキスト全ての行の2列目以降だけを一括で消す(ホールドバッファ機能)

こんなテキストファイルがある $ vim HoldBuffer_test.txt 青いところだけ残したい。赤いところだけ消したい。 コマンド一発でやりたい。 // vimのホールドバッファ機能を使えばできる。 min117.hatenablog.com 残したいところをバッファにホールド(保持)…

RaspberryPi3 neofetch コマンドでOSロゴとシステム情報を表示する

neofetch という面白いコマンドを知った。RaspberryPi3 で実行するとこうなる。 $ neofetch OSのロゴとシステム情報を表示するようだ。Debian や Ubuntuもある。 orebibou.com // RaspberryPi のインストール方法は他とは異なる。このサイトの「All other ve…

RaspberryPi3 テレビリモコンから omxplayer を操作する(mkfifo /tmp/cmd → omxp-with-cec.sh)

以前の記事で、omxplayer の操作(一時停止、再生)をbashコマンドからできることが分かった。FIFO経由でコマンドを流し込んでやれば動く。 min117.hatenablog.com さらに前回記事では、RaspberryPi3を(HDMIで)繋いだテレビのリモコンで押したキー信号(上…

RaspberryPi3 「テレビリモコンで押したキー信号」を捕捉する cec-client | grep --line-buffered -Po '(?<=key pressed: )\w+(?= \(\d, \d\)$)'

以前の記事で、cec-clientなるプログラムを使えばRaspberryPiからテレビを操作できることが分かった。 min117.hatenablog.com 今回も cec-client を使うが、やりたいのは(電源オンオフより)もっと複雑。 リモコンで押されたキーを捕捉したい。つまりこうな…

bash grepの-oP(または-Po)オプションとは? → 正規表現にマッチした列のみ抜き出す

素晴らしい記事を発見。grep には -oPというオプションがあるらしい(-Poでも同じ)。 -o マッチした列のみ切り出す(grep | awk 正規表現 と同じ) -P Perlの正規表現を使って抜き出す とくに -P(ハイフンP)オプションについては情報がなくて探すのに苦労…

bash grepの前にバックスラッシュをつけて「\grep」と書く意味は?

例えば INSTALLED=$(dpkg -l \grep $1) のようにして変数INSTALLEDを設定する場合なぜgrepの前にバックスラッシュがあるのか? 答え) \grep /bin/grep または /usr/bin/grep にある システムにデフォルトのgrepを使うという意味。つまり、すべてのalias設定…