Big JSON を読み込みを汎用化

gson Java

先日の「Big JSON を読み込む JsonReader の実践」より汎用化を考えました。。以下、抜粋のコードです。 public void execute(JsonReader reader, Consumer<T> consumer){ boolean request = false; try{ while((reader.hasNext() || reader.peek().equals(Jso</t>…

2020-06-05

Big JSON を読み込む JsonReader の実践

gson Java

先日書いた「Big JSON を読み込む JsonReader」、より実践的なサンプルを書いてみる。 JSON素材 { "category": "JsonReader テスト", "filename": "sample.json", "itemlist":[ { "name": "A", "flag": true, "time": "2020/06/05 22:14:25" }, { "name": "…

2020-06-03

置換表、正規表現マッチ replace

Java

前持って置換文字列の表を用意しておいて、正規表現で見つけて置換する処理を無駄なく処理できるものがあったら良いだろうと考えました。 import java.util.Iterator; import java.util.Map; import java.util.Optional; import java.util.Spliterator; imp…

2020-06-01

Big JSON を読み込む JsonReader

Java gson

大きなJSON を Google gson で読込むとき、メモリ不足にならないように、fromJson ではなく JSONのトークンで読みだす JsonReader を実行するのだが、注意しなければならない点がある。以下のように、JsonReader の hasNext() 問い合わせだけでは、END_ARRAY…

2020-05-23

yipuran-core から CSV処理機能を他に分岐する

Java

長い間、ＣＳＶ読み書きする処理を、yipuran-core ライブラリで抱えこんでいたが、 yipuran-core に様々な処理が増えてきた。 CSV書込み処理を強化したい。という理由で、yipuran-core のバージョン 4.19 （ Ver 4.19 ）より、ＣＳＶ読み書きの処理を、yip…

2020-05-17

配列のマップのキー自動チェック登録

Java

リストのケースに触発されて、配列の場合、、、 import java.io.Serializable; import java.lang.reflect.Array; import java.util.Map; import java.util.Optional; import java.util.function.Function; import java.util.function.UnaryOperator; /** * M…

2020-05-16

Setコレクションのマップキーチェック add

Java

リストMap のリストに要素を追加（３） - Oboe吹きプログラマの黙示録リストMap のリストに要素を追加（４） - Oboe吹きプログラマの黙示録を書いたので、Set の方も、、、Set の場合は、TreeSet や、HashSet を指定できた方が良いので、未指定→HashSet と…

2020-05-16

リストMap のリストに要素を追加（４）

Java

oboe2uran.hatenablog.comもっと短く書けるけど、メリットないか。。。 import java.io.Serializable; import java.util.ArrayList; import java.util.Arrays; import java.util.List; import java.util.Map; import java.util.Optional; import java.util.f…

2020-05-14

Stream boolean を集計

Java

Stream 処理して単に、boolean を集計したい時、１つでも true が発生、または全てが true になるかを求める時など、 forEach で、AtomicBoolean をセットするのは直感的だが、賢くはない。map メソッドで、Boolean に変換して collect で集計するのがスマ…

2020-05-13

リストMap のリストに要素を追加（３）

Java

リストMap のリストに要素を追加する時、、 - Oboe吹きプログラマの黙示録リストMap のリストに要素を追加（２） - Oboe吹きプログラマの黙示録と書きましたが、、以下に落ち着きそうです。 import java.io.Serializable; import java.util.ArrayList; imp…

2020-05-12

リストMap のリストに要素を追加（２）

Java

昨日書いた、 oboe2uran.hatenablog.com の続きです。昨日書いたもの。。。 public static <T> UnaryOperator<List<T>> listAddReturn(T t){ return l->{ l.add(t); return l; }; } Map<String, List<String>> map = new HashMap<>(); map.put("a", Optional.ofNullable(map.get("a")) .map(</string,></list<t></t>…

2020-05-11

リストMap のリストに要素を追加する時、、

Java

Map<String, List<String>> map; 結構、頻繁にこういう Key と、List のマップを用意して、Key の存在を確認して List を新しく生成して、put したり、マップから取得して add して再びマップに put するのを記述するのは、いつもなんとかならないかと思ってました。そこで、以下</string,>…

2020-05-10

カウンタ付きの Consumer

Java

Stream ラムダ式の実行中のカウンタ - Oboe吹きプログラマの黙示録の続き、、、 Throwable を捕捉できる Consumer 以下を継承するようにして、 yipuran-core/ThrowableConsumer.java at master · yipuran/yipuran-core · GitHub ３要素の Consumer 、トリプ…

2020-05-09

Stream ラムダ式の実行中のカウンタ

Java

Stream の forEach や、map 、filter 、様々なラムダ式実行の中で、カウンタが必要な時、しかたなく、AtomicInteger や、グローバルスコープに置いたカウンタインクリメント参照をよく書いてました。また、ネット検索してよく紹介されてる例は、実行処理…

2020-05-06

List<Integer> → int[]

Java

Object型からプリミティブ型でラッパーが必要になる宿命から、、 Integerリストから、int[] が欲しい時の為に、、、 public static int[] toIntArrays(Collection<Integer> values){ int[] iary = (int[])Array.newInstance(int.class, values.size()); int n = 0; fo</integer>…

2020-05-05

配列のリストをソートする

Java

先日の投稿、入れ子リスト、List<List<T>> をソートする - Oboe吹きプログラマの黙示録と、 yipuran-core/NestedListComparator.java at master · yipuran/yipuran-core · GitHub に続いて配列のリストをソートする場合もついでなので書いてみる。。前回同様、配列</list<t>…

2020-05-04

Repetition Permutation の生成数

Java

要素の繰り返し有りの順列 Permutation が生成するリストは、Java では、長さ８以上ではメモリ不足になってしまう。生成する順列を溜めなくても、７以上はかなり遅くなる。以下のとおり長さに対して結果の数はとても大きくなる。 data length List A,B,C 3 …

2020-05-03

入れ子リスト、List<List<T>> をソートする

Java

入れ子リストをソートしなければいけない要件は少ないとは思います。任意クラスが、Comparable を実装しているなら簡単ですがそうでなく、中の属性値でソートしなければならない時は面倒です。例）Item は,属性 Integer price を Not NULL で持っており、こ…

2020-05-02

Python で順列・組み合わせ

Python

itertools を使います。順列（Permutation) # -*- coding: UTF-8 -*- import itertools for s in itertools.permutations(['A','B','C'], r=3): print(s) 重複ありの順列（Repetition Permutation) for s in itertools.product(['A','B','C'], repeat=3): pr…

2020-04-25

総称型の配列を作るメソッド

Java

配列数が動的な総称型の配列を作る必要がある時、、、ｎ個の配列、全て null で初期化するなら、 @SuppressWarnings("unchecked") public static <T> T[] nullArrays(int n, Class<T> cls) { return (T[])Array.newInstance(cls, n); } ただし、int.class や、char</t></t>…

2020-04-20

リストから、固定の長さで並びを保持したリストのリストを求める。

Java

リストと連続させる数を指定して、List の List で結果を求める。 public static <T> List<List<T>> lengthSequencelist(List<T> list, int length){ int last = list.size() - length + 1; return Stream.concat( IntStream.range(0, last).boxed().map(i->list.subList(i</t></list<t></t>…

2020-04-19

Java9 dropWhile と takeWhile を意識した Java8 で実行する方法

Java

昨日、以下を書いたが、、 Java9 Stream の takeWhile を意識した Java8 での方法 - Oboe吹きプログラマの黙示録 dropWhile もと思い、、改めて、dropWhile の方法も。。。 public static <T> Stream<T> dropstream(Stream<T> stream, Predicate predicate) { Spliter</t></t></t>…

2020-04-18

Java9 Stream の takeWhile を意識した Java8 での方法

Java

filter Predicate を頑張って書けばいいのだけど、賢くない。 public static <T> Stream<T> whilestream(Stream<T> stream, Predicate predicate) { Spliterator<T> itr = stream.spliterator(); return StreamSupport.stream( new Spliterators.AbstractSpliterator<T>(itr</t></t></t></t></t>…

2020-04-16

YearMonth のメモ

Java

Java8 java.time.YearMonth は、以下を見れば済むことなのだけれども、書く機会が少なかったのでメモ https://docs.oracle.com/javase/jp/8/docs/api/java/time/YearMonth.html YearMonth ym = YearMonth.of(2020, 12).plusMonths(3); System.out.println(y…

2020-04-15

日付リストを Stream で生成する方法について

Java

よく考えもせずに、安易に IntStream で map 変換して作っていた。 10日分の日付リスト List<LocalDate> list = IntStream.range(0, 10).boxed() .map(i->LocalDate.now().plusDays(i)).collect(Collectors.toList()); java.util.stream.Stream の iterator を使えば、</localdate>…

2020-04-09

groupingBy と toMap のメモ

Java

Java Stream groupingBy と toMap のメモを今更だけど、テンプレートとしてメモの整理 List<Item> list groupingBy Map<String, List<Item>> map = list.stream().collect(Collectors.groupingBy(t->t.name)); ちゃんと書く Map<String, List<Item>> map = list.stream().collect(Collectors.groupingBy(t</string,></string,></item>…

2020-04-07

長さ制限しない重複順列

Java

先日公開した要素の重複（繰り返しを許す）順列、RepeatablePermutation yipuran-core/RepeatablePermutation.java at master · yipuran/yipuran-core · GitHub これは、元のリストより大きい長さの順列を抽出しようとすると、 size over の IllegalArgument…

2020-04-04

Java マップの値からキーの参照

Java

過去、何度も書いているかもしれない「マップの値からキーの参照」という命題結果をStream で取得することにして、、、 public static <K , V> Stream<K> getKeysWithValue(Map<K, V> map, V v){ return map.entrySet().stream() .filter(e->v.equals(e.getValue())).map(Ma</k,></k></k>…

2020-04-01

重複順列

Java

要素の重複有りの順列（Permutation）を Java で、いろんなオブジェクトに対して作成できるようにする。 import java.util.ArrayList; import java.util.Arrays; import java.util.List; /** * RepeatablePermutation */ public class RepeatablePermutation<T></t>…

2020-03-28

hashCode と equals を簡単に実装

Java

Java クラスの hashCode と equals メソッドを手書きするのは、結構面倒くさい。ＩＤＥ Eclipse で自動生成してもいいけど、毎回、各々これで書くのもなんだか。。。Apache の commons-lang3 にある hashCode と equals のビルダーを使うと、書く量も少な…

2020-01-01から1年間の記事一覧