2018-01-01から1年間の記事一覧

Bash on Ubuntu on Windows BOW に Anaconda をインストールする

普通にLinuxにインストールするのと同じ 下記からインストーラゲット https://www.anaconda.com/download/#linux bash Anaconda3-2018.12-Linux-x86_64.sh yes yes no

エラーになったときにやったこと

elasticdump を実行して出たエラー /usr/local/lib/node_modules/elasticdump/bin/elasticdump:69 for (var i of jsonParsedOpts) { ^^ SyntaxError: Unexpected identifier at Module._compile (module.js:439:25) at Object.Module._extensions..js (modul…

合格! JDLA Deep Learning for GENERAL 2018#2

合格しました!日本ディープラーニング協会にジェネラリストとして認定されました G検定公式テキスト3回読んでチャレンジしたらなんとか合格できました 機械学習の手法についてはあらかじめ多少理解できていたのも良かったようです

「Python] from size を使って全権取得しようとしたら、1万件までしかムリと言われたので仕方なく scroll を使った時の メモ

from + size の合計で 1万が上限らしい パラメータをいじると上限変えられるらしいけど、根本的な解決にならないのでメッセージ通りscrollを使ってみる elasticsearch.exceptions.TransportError: TransportError(500, 'search_phase_execution_exception', …

PyCharm でコピペできない Ctrl+C Ctrl+V 効かない ときにやったこと

ファイル-> 設定 -> Vimエミュレーション Ctrl+C と Ctrl+V のハンドラーをIDEにする

gc2pe httplib2.SSLHandshakeError: [SSL: CERTIFICATE_VERIFY_FAILE

sample.dat がない。もしくは0バイトのときは、別のPCで sample.py を実行して sample.dat を作ってコピーする

UTF-8で作成したCSVをExcelで文字化けせずに開けるようにする方法

ExcelはBOM付きだとUTF-8だと判断できるらしい open するときに encoding='utf_8_sig' を指定する f = open( 'hoge.csv', 'w', encoding='utf_8_sig') writer = csv.writer(f, lineterminator='\n', dialect='excel', quotechar='"', uoting=csv.QUOTE_ALL)

for Windows インストール メモ

Docker for Windows をインストール https://www.docker.com/docker-windowsDownload for WindowsPlease Login To Download # ↓ アカウントがない場合 Create AccountDockerID、 Email、 Passwordを入力チェックボックスはすべてチェックするSign Upメールが…

Windows10 で Hyper-V を有効にする方法

PowerShell を管理者権限で起動して以下実行 Enable-WindowsOptionalFeature -Online -FeatureName Microsoft-Hyper-V -All この操作を完了するために、今すぐコンピューターを再起動しますか? [Y] Yes [N] No [?] ヘルプ (既定値は "Y"):Y Windows管理ツー…

[Windows] 日本語化 メモ

PyCharmをインストールする http://mergedoc.osdn.jp/ の「 Pleiades プラグイン・ダウンロード」 から Windows をクリック ダウンロードしたファイルを解凍 sepup.exe 実行 日本語化するアプリケーション : C:\Program Files\JetBrains\PyCharm Community E…

プロジェクト作成のときのメモ

Windows の場合は django-admin.py ではなく django-admin とする django-admin startproject config . アプリケーション作成 python manage.py startapp accounts

Anaconda再インストールメモ

Jupyterが起動しなくなったのと、場当たり的にいろいろインストールしたり ごにょごにょしたりして、カオスになってしまっていたで整理のために再インストールした Anaconda アンインストール コントロールパネル -> プログラムと機能 -> Python 3.6.1(Anaco…

mojimoji をインストールしてエラーになったときにやったこと メモ

mojimoji を インストールした時、C++コンパイラがないとメッセージが出た error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools ここからダウンロ…

インストールメモ

MySQL インストール https://dev.mysql.com/downloads mysql-8.0.12-winx64.zip Dドライブに解凍 D:\mysql-8.0.12-winx64 ディレクトリ作成 D:\mysql-8.0.12-winx64\data D:\mysql-8.0.12-winx64\logs D:\mysql-8.0.12-winx64\tmp my.ini作成 D:\mysql-8.0.1…

Windows10 に PySpark環境を構築 メモ ( Spark 2.3.1 Anaconda Hadoop )

1. Spark インストール https://spark.apache.org/downloads.html 1. Choose a Spark release: 2.3.1 (Jun 08 2018) 2. Choose a package type: Pre-built for Ppache Hadoop 2.7 and later 3. Download Spark: spark-2.3.1-bin-hadoop2.7.tgz 4. Verify thi…

線形モデル

yは特徴量の線形和で表すことができるという仮定に基づいている 多数の特徴量を持つデータに対して有効 特に訓練データのデータポイント数よりも特徴量の方が多い場合

メモ

#条件抽出 res_df.loc[(res_df['Age']>50) & (res_df['Country']=='Italy')] df = df.where( df < 100 ) # インデックスの設定 res_df.set_index('Country', inplace=True) # インデックスの値の確認 インデックスはユニークとは限らない res_df.index.uniqu…

[Pocket API] 試してみた

Webページからの本文抽出をするために Pocket の API を試してみました https://help.getpocket.com/ ライブラリのインストール pip install pocket-api プログラム from pocket import Pocket, PocketException import json url = 'https://www.yahoo.co.jp…

[Docomo] カテゴリ分析 clusteranalytics 試してみた

Docomo の カテゴリ分析 は 入力文からキーワード取得とカテゴリ分析を行い、文全体のカテゴリ分布を返してくれます https://dev.smt.docomo.ne.jp/?p=docs.api.page&api_name=language_analysis&p_name=jetrun_api_1#tag01 # Docomo カテゴリ分析 clusteran…

[Docomo] センシティブ分析 sensitivecheck 試してみた

Docomo の センシティブ分析 は文章に含まれる 武器、宗教、アダルトなど、センシティブ(敏感)とされるキーワードを検知してくれます https://dev.smt.docomo.ne.jp/?p=docs.api.page&api_name=language_analysis&p_name=jetrun_api_2#tag01 # Docomo セン…

Cloud Natural Language API 試せなかった

以下の API は 2018/3/19 現在 日本語未対応のようです エンティティ感情分析 analyzeEntitySentiment コンテンツ分類 classifyText

[Goolge Cloud] Natural Language API 試してみる 感情分析 analyzeSentiment

感情分析 は文章全体の感情が ポジティブかネガティブかとその強度を推定してくれます import sys import requests import json content = U'逃げちゃダメだ。逃げちゃダメだ。逃げちゃダメだ。' ApiKey = "XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX" url = 'https…

[Goolge Cloud] Natural Language API 試してみる エンティティ分析 analyzeEntities

エンティティ分析は文章から重要な固有名詞を取り出してくれます # エンティティ分析 analyzeEntities import sys import requests import json content = U'僕は、エヴァンゲリオン初号機のパイロット、碇シンジです!' ApiKey = "XXXXXXXXXXXXXXXXXXXXXXXX…

Cloud Natural Language API 試してみる 環境構築編

Google Cloud Platform https://console.cloud.google.com ログイン上ナビ 既存のプロジェクト名 選択 「+」プロジェクトの作成 プロジェクト名 : HogeTest プロジェクトIDが表示されるのでコピーする hogetest 「作成」トップページに戻ったら 上ナビから …

Natural Language Understanding を試してみる

サービスの作成 https://console.bluemix.net/catalog/ 左ナビ 「Watson」 「Natural Language Understanding」 「作成」 「ライト」← 少量のお試しなら無料でできる 「作成」 資格情報の作成 https://console.bluemix.net/dashboard/apps/ 「Natural Langua…

使用料 を確認する方法

http://portal.azure.com 左ナビ 「コストの管理と請求」 左ナビ 「請求書」 「サブスクリプションまたは予約済みインスタンス」から選択

使用料を確認する方法

https://console.bluemix.net/dashboard/apps/上ナビから 「管理」 -> 「請求及び使用量」 -> 「請求処理」 左ナビから 「使用状況ダッシュボード」 で 当月の使用料金が表示される月を変えるには 「現在の使用サイクル」から 月を変更できる

httplib2 で SSLHandshakeError: [SSL: CERTIFICATE_VERIFY_FAILED] が出るようなったときにやったこと gc2pe

変更したところ http = httplib2.Http(disable_ssl_certificate_validation=True)エラー httplib2.SSLHandshakeError: [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:661) 参考ページ https://github.com/google/google-api-python-c…

SJIS を使えるようにする方法 参考ページ

http://totech.hateblo.jp/entry/2014/09/22/071012

JAVA_HOME の 設定 メモ

Javaを Program Files 以下に インストールした場合は置き換えて設定する'Program Files' -> Progra~1 'Program Files(x86)' -> Progra~2 JAVA_HOME : C:\Progra~1\Java\jdk1.8.0_65 JRE_HOME C:\Progra~1\Java\jre1.8.0_65