Spark始めた初期につまづいたのでメモ。 結果の違いで覚えた。 まずはRDDを作る。 このRDDに対してmap 結果はこれ Array[Array[String]] = Array(Array(Some, People […]
続きを読む投稿者「俺」のアーカイブ
Xubuntu 18.04 のダークテーマを有効にする
Xubuntu 18.04のダークテーマを有効化したのでメモ ~/.config/gtk-3.0/settings.ini に下記をコピペして再ログインする。 ファイルがなければ作る。
続きを読むGoogle BigQueryでタブ区切りTSVをインポート＆エクスポート
すごいよく使うけどよく忘れるのでメモ TSVのインポート ※ヘッダあり・10行未満のエラーは無視 TSVでエクスポート ※ヘッダなし
続きを読むSpark ScalaでsortByKeyを降順にする
SparkでreduceByKeyしたあとにsortByKeyで降順にソートしたかったのでメモ sortByKey()の引数にfalseを渡す。
続きを読むUbuntu 18.04 に Scala をインストール
Ubuntu(Xubuntu) 18.04にScalaをインストールしたんだが、REPLで打ち込んだ文字がエコーされなかったのでメモ まずはaptでscalaをインストール インストールしたらscalaのREPLを起動 […]
続きを読むHuaweiのHonor MagicbookにXubuntu 18.04をインストール
PCを買い替えたのでメモ。 ファーウェイのHonor Magicbookをgeekbuying.comから購入。 ネットでの注文から出荷まで5営業日、それからちょうど7日後に到着。 Huawei Honor Magicb […]
続きを読むnkfでUTF-8のBOMを削除する
nkfでBOM付きのUTF-8をBOMなしのUTF-8Nに一発変換したかったのでメモ hoge.txtのBOMを削除 おまけ：hoge.txtにBOMを追加
続きを読むgitでリモートファイルをローカルに上書きしたい
ローカルをとりあえず上書きしてやり直したかったのでメモ たまに使う。
続きを読むGCPとSoftEther VPNで固定IPゲートウェイ環境を作る
会社のISP回線は固定IPじゃないのだが、GCPを使って固定IPゲートウェイを作ったのでメモ まず最初に某オープンVPN使ったが速度が遅い、というか通信途切れる。 MTUとMSS調整してもどうも接続が途切れるので2日で諦 […]
続きを読むUbuntu起動時に「システムプログラムの問題が見つかりました」
Ubuntu (Xubuntu) で起動時に「システムプログラムの問題が見つかりました」というメッセージが表示されるようになったのでメモ。 crashログを消して、apportを無効にすれOK /etc/default/ […]
続きを読む